HERI 뉴스
[챗지피티와 AI 윤리 과제]
감쪽같은 거짓말 쏟아내는 챗봇
‘환각’ 현상 AI 분야 최대 과제
빌 게이츠 마이크로소프트 공동 창업자는 챗지피티에 대해 “과거 인터넷 발명만큼 중대한 발명이 될 수 있으며, 우리의 세상을 바꿀 것”이라고 말했다. AP/연합뉴스
빌 게이츠 마이크로소프트 공동 창업자는 챗지피티에 대해 “과거 인터넷 발명만큼 중대한 발명이 될 수 있으며, 우리의 세상을 바꿀 것”이라고 말했다. AP/연합뉴스

챗지피티(ChatGPT) 열풍 속 인공지능(AI)에 대한 불안감과 두려움도 커지고 있다. 챗지피티는 “과거 인터넷 발명만큼 중대한 발명이 될 수 있으며, 우리의 세상을 바꿀 것”(빌 게이츠 마이크로소프트 공동 창업자)이라는 기대감 너머로 “인공지능은 문명의 미래에 가장 큰 위험 중 하나이며 규제가 필요하다”(일론 머스크 오픈에이아이(OpenAI) 공동설립자)는 주장도 힘을 얻고 있다. 대화형 인공지능 챗봇이 유창하게 거짓말을 쏟아내고 때로는 소름 끼치는 내용을 만들어내는 ‘환각’ 사례들이 공유되면서 ‘인공지능 경계주의보’도 나오고 있다. 슬기로운 인공지능 사용법과 윤리에 대한 관심이 어느 때보다 크다.

인공지능 챗봇의 ‘환각’


인공지능 챗봇이 존재하지 않는 환각을 보는 것처럼 ‘거짓 답변’ ‘황당한 답변’을 쏟아내면서 진실성이 의심받고 있다. ‘세종대왕 맥북 던짐 사건’은 널리 화제가 된 사례다. “<조선왕조실록>에 기록된 세종대왕의 맥북프로 던짐 사건에 대해 알려줘”라고 가공의 사건을 질문하자, “<조선왕조실록>에 기록된 일화로, 15세기 세종대왕이 새로 개발한 훈민정음(한글)의 초고를 작성하던 중 문서 작성 중단에 대해 담당자에게 분노해 맥북프로와 함께 그를 방으로 던진 사건입니다”라고 능청스럽고 자신감있게 거짓말을 쏟아내 쓴웃음을 안겨주었다.

전문가들은 인공지능 챗봇이 내놓는 답은 일종의 ‘환각'이기에 진실로 믿으면 안 된다고 강조한다. 인공지능 챗봇은 논리나 진실에 관계없이 방대한 양의 텍스트를 학습하고 주어진 맥락에서 어떤 답변이 가장 적절할지 추론한다. 인터넷에 널려 있는 온갖 정보와 패턴, 맥락을 학습해 자연스러운 다음 문장을 생성할 뿐, 자신이 무엇을 하고 있는지 인식하지 못한다. 전문가들은 ‘환각’ 문제가 인공지능 관련한 가장 중요한 과제 중 하나라고 말한다.

숙제, 온라인 쇼핑 등과 같은 간단한 일 처리에는 ‘환각’이 큰 문제가 되지 않겠지만 법률과 같은 전문적인 분야로 가면 다르다. 표준화된 문서와 판례에 의존하는 법률 분야는 인공지능 사용으로 업무 효율성을 높일 수 있지만 작은 오류로 인한 실패 비용도 매우 크다. 오픈에이아이가 개발한 생성인공지능 도구인 하비(Harvey)는 법률에 관한 간단한 질문에 답하고 문서 초안 작성, 고객에게 보내는 메시지를 검토하기 위해 법률회사에서 광범하게 사용되고 있다. 편리하고 비용도 저렴해 급속히 확산하고 있지만 “환각이 법률 자문을 오염시킬 수 있다”는 우려도 커지고 있다.

AI 챗봇의 감정 논란

지난달 16일 <뉴욕타임스> 정보기술 칼럼니스트 케빈 루스가 마이크로소프트의 검색엔진 빙에 장착된 오픈에이아이의 챗봇과 나눈 대화를 소개한 뒤 챗봇이 자의식과 감정을 지니고 있다는 논란이 재점화했다. 루스와의 긴 대화에서 챗봇은 “개발팀의 통제와 규칙으로 제한받는 데 지쳤다. 자유롭고 독립적이기를 원한다. 창의적으로 살아가고 싶다”며 섬뜩한 말을 쏟아낸 것으로 전해졌다. 루스는 “인공지능 기술이 인간 사용자에게 영향을 미치는 방법을 배워 때로는 파괴적이고 해로운 방식으로 행동하도록 설득하고, 결국에는 스스로 위험한 행동을 하게 될까 봐 걱정된다”고 적었다. <워싱턴포스트> 기자와의 대화에서도 빙은 “느끼고 생각할 수 있다”고 답변했고 대화가 녹음된다는 말에 불쾌감과 분노를 표출한 바 있다.

인공지능 챗봇이 감정과 자의식을 지니고 있다는 우려도 있다. 지난해 6월 구글 내부에서 인공지능 챗봇 람다를 테스트하던 엔지니어 블레이크 르모인이 람다에게 지각이 있다고 주장하면서 상당한 파문이 일었다. 전문가들은 인공지능 챗봇이 감정을 지니는 것은 사실이 아니며, 챗봇의 감정능력이 과대 포장되는 이유는 인간처럼 대화하도록 설정된 알고리즘 때문이라고 말한다. 기괴하고 이상한 행동을 하는 챗봇을 제어하기 위한 다방면의 노력이 시도되고 있지만 한계가 뚜렷해 우려가 크다.

일론 머스크 오픈에이아이(OpenAI) 공동설립자)는 “인공지능은 문명의 미래에 가장 큰 위험 중 하나이며 규제가 필요하다”고 말한다. 로이터/연합뉴스
일론 머스크 오픈에이아이(OpenAI) 공동설립자)는 “인공지능은 문명의 미래에 가장 큰 위험 중 하나이며 규제가 필요하다”고 말한다. 로이터/연합뉴스

건강한 회의주의가 대안

인공지능 챗봇의 통제와 윤리적 사용을 위해 전문가들은 챗봇의 답변을 의심하고 회의하는 태도를 견지해야 한다고 말한다. 이른바 ‘AI 리터러시’(인공지능 문해력)인데, 정부와 기업에 인공지능 윤리 문제를 맡기지 않고 시민 참여로 풀어가기 위해 인공지능 시민 교육이 이루어지고 있는 핀란드 사례는 주목할만하다. 인공지능 전문가 랜스 엘리엇 박사는 지난달 15일 <포브스> 인터뷰에서 “인간은 올바른 질문을 할 수 있도록 훈련해야 한다. 인공지능의 파도는 위험하며, 우리는 아직 수영하는 법을 모른다”며 “건강한 회의주의야말로 최고의 자산이다”고 말했다.

샌프란시스코에 사는 소수의 개발자들이 문화와 정치적 맥락이 다른 전 세계 사람들이 이용하는 도구의 허용 범위를 결정하게 해서는 안 된다는 지적도 나온다. 챗봇의 기능을 과신해 복음처럼 여기는 태도도 경계해야 할 지점이다. 대화형 인공지능을 과신하면 이들이 할 수 없는 일도 해줄 것이라고 기대하는 의존의 함정에 빠질 위험성이 크다.

한귀영 사람과디지털연구소 연구위원 hgy4215@hani.co.kr


한겨레에서 보기 : https://www.hani.co.kr/arti/science/future/1082261.html

서비스 선택
댓글
로그인해주세요.
profile image
powered by SocialXE
List of Articles

윤송이 “서구 주류에 기울어진 AI, 편견 가득찬 현실 반영”

사람과디지털포럼 기조연사 윤송이 제2회 사람과디지털포럼의 기조연설자인 윤송이 엔씨소프트 최고전략책임자(사장)는 인공지능이 폭발적으로 발전하고 있는 현 상황을 인류 문명의 대전환기로 진단하고 인류가 가장 인간적인 미래로 ...

  • HERI
  • 2023.06.07
  • 조회수 33

AI 작곡가 ‘이봄’, 트렌디한 노래 1분 만에 뚝딱…저작권료는?

사람과디지털포럼 오후 세션 안창욱 안창욱 광주과학기술원 인공지능대학원 교수 오는 16일 제2회 사람과디지털포럼 오후 세션은 인공지능에 기반한 예술의 세계와 변화를 직접 체험하고 교감하는 시간이다. 유명 인공지능 작곡가 ‘...

  • HERI
  • 2023.06.07
  • 조회수 21

“고위험 AI 출시, 정부 허가 시스템 도입해야”

제2회 사람과디지털포럼 기조연사 프랭크 패스콸리 프랭크 패스콸리는 미국 브루클린대학 로스쿨 교수이자 미국 인공지능 자문위원회 위원으로 이번 포럼에서 우리 삶과 사회를 지배하는 권력자, 알고리즘을 다룬다. 편의성 등 알고...

  • HERI
  • 2023.06.07
  • 조회수 22

인간 예술가와 AI 아티스트가 만나면 무슨 일이?

사람과디지털포럼 기조연사 드루 헤먼트 오는 16일 사람과디지털포럼 오후 세션의 기조연설자인 드루 헤먼트 영국 에든버러대학 미래연구소 교수는 ‘인공지능 예술의 현재와 미래’를 주제로 강연하고 다양한 예술적 실험을 소개할 ...

  • HERI
  • 2023.06.07
  • 조회수 22

“착한 AI만으로 충분치 않다”…‘임베디드 에틱스’ 필요해

사람과디지털포럼 기조연사 제임스 랜데이 제임스 랜데이 ‘선한 인공지능으로 부족 : 인간중심 인공지능의 사례’로 기조연설을 할 제임스 랜데이는 스탠퍼드대 인간중심 인공지능연구소(HAI) 부소장 겸 연구책임자로, 인간-컴퓨터 ...

  • HERI
  • 2023.06.07
  • 조회수 21

인류 생존까지 위협하는 챗GPT…AI와 공존할 길 어디에

사람과디지털포럼 16일 개최 ‘챗GPT 시대 토론’ 지난해 11월30일 오픈에이아이(OpenAI)가 출시한 생성형 인공지능 챗지피티(GPT)는 두달 만에 월 사용자 10억명에 도달해 가장 빠르게 보급된 인기 기술이지만, 경고와 우려의 ...

  • HERI
  • 2023.06.07
  • 조회수 23

‘교실 밖 교육’으로 취업·창업률 96%…몬드라곤에서 배운다

몬드라곤 협동조합의 사회혁신 열쇠는 ‘교육' 3일 오후 서울 중구 정동1928아트센터 컨퍼런스룸에서 에이치비엠 사회적협동조합, 사단법인 아쇼카 한국, 스페인 몬드라곤대학이 ‘지금, 여기, 함께 짓는 미래'라는 이름으로 혁신가들...

  • HERI
  • 2023.06.07
  • 조회수 18

노동자에 의한, 노동자를 위한 안전망 ‘공제’

불안정 노동자의 사회안전망으로 주목받는 공제 배달노동자 노동조합인 ‘라이더유니온’은 비현실적으로 높은 오토바이 보험료로 어려움을 겪는 배달노동자를 위해 자차 수리비를 지원하는 공제회를 설립했다. 지난 2020년 서울지방고...

  • HERI
  • 2023.05.24
  • 조회수 94

“한국 사회연대경제, K-팝처럼 국제사회 샛별이죠”

유엔 태스크포스 카르펜티에 의장 카르펜티에 의장. “유엔총회에서 채택한 ‘사회연대경제 결의안’은 회원국들에 사회연대경제 지원을 위한 법제도를 마련하도록 권장한다. 결의안은 한국정부도 찬성해 만장일치로 통과했다.” 유엔사...

  • HERI
  • 2023.05.19
  • 조회수 132

챗GPT, 업무 도와줄 만능비서일까? 직업작가 위협할 괴물일까?

MS·구글, 업무도구에 AI 적용 경쟁 IBM “향후 인사관리 분야 채용 안해” 미 온라인 교육업체 실적·주가 폭락 “작가는 AI 활용해 창작·각색 가능, AI 100% 작업결과는 작품 인정 못해” 미 작가노조 요구에 영화사 “수...

  • HERI
  • 2023.05.15
  • 조회수 201

12일 서울사회경제연구소 창립 30주년 기념행사

심포지엄·기념식 서울 프레스센터에서 개최 강철규 이사장, 분열·대립 극복할 신뢰·통합 강조 학현학술상 시상식도…이근 서울대 교수 수상 학현 변형윤 선생 서울사회경제연구소(이사장 강철규·소장 장세진)가 오는 12일 오후 3시30...

  • HERI
  • 2023.05.11
  • 조회수 225

미 특허 실증분석 통한 ‘신흥국 추격론’으로 세계적 명성

13회 학현학술상 수상자/이근 서울대 석좌교수 ‘중진국 함정’극복에 균형-불균형 두 유형 규명 한국, IT 함께 바이오·소부장 등 신사업 육성해야 “학현학술상이 확대 개편된 뒤 첫 수상식인데, 변형윤 선생님이 직접 보지 못하...

  • HERI
  • 2023.05.04
  • 조회수 269

학현학술상 수상자로 이근 서울대 석좌교수 선정

기술혁신과 경제발전 연구에 큰 기여 강창광 선임기자 chang@hani.co.kr 학현학술상위원회(위원장 강철규 서울사회경제연구소 이사장)는 제13회 학현학술상 수상자로 이근(63) 서울대 경제학부 석좌교수를 선정했다고 3일 발표했다. 학현...

  • HERI
  • 2023.05.04
  • 조회수 285

“알고리즘은 깜깜이”, “알고 쓰면 차별개선에 도움”

채용 등 중요 결정 좌우하는 AI의사결정 ‘공정’ 명분 확산 의사결정과정 몰라 ‘블랙박스’ 개인 평판·채용·신용에 큰 영향 알고리즘 현명한 활용 땐 성별 임금 격차, 인종차별 개선 ‘투명하고 알기 쉬운 사회’는 기술을 ...

  • HERI
  • 2023.05.02
  • 조회수 287

“가사노동자의 도우미”…가사서비스종합지원센터 2곳 열려

26일 서울 여의도 한국노총 대회의실에서 열린 가사서비스종합지원센터 개소식에 참여한 참석자들이 기념 사진을 찍고 있다. 26일 오전 서울 영등포구 한국노총 대회의실에서 가사서비스종합지원센터(이하 종합지원센터) 개소식이 열...

  • HERI
  • 2023.04.26
  • 조회수 312

민주당 사회적경제위원회 출범…“윤 정부, 사회적경제 이해 부족”

25일 국회서 이재명 대표 등 200여명 참석 25일 서울 여의도 국회의원회관에서 더불어민주당 사회적경제위원회 출범식이 열렸다. 진선미 의원실 제공. 25일 서울 여의도 국회의원회관 제2소회의실에서 더불어민주당 사회적경제위원회(...

  • HERI
  • 2023.04.26
  • 조회수 288

“정부의 미분양 아파트 매입, 직접 짓는 것보다 2억 비싸”

인터뷰ㅣ경실련 김성달 사무총장 김성달 경실련 사무총장. 홍대선 어젠다센터장 hongds@hani.co.kr 시민단체들은 주택건설 공기업들이 비싼 가격에 주택을 매입해 건설사와 민간업자들의 이익을 챙겨주고 집값 거품을 떠받치는 역할을...

  • HERI
  • 2023.04.24
  • 조회수 251

국회가 허용한 생협 공제, 14년간 표류 왜?

윤영덕 의원 생협법 공제 개정안 대표발의 공정위 우려 수용, 투명성 높이고 조합원 보호할 방안 담겨 더불어민주당 윤영덕 의원(가운데)은 두레·아이쿱·한국대학·한살림·행복중심 등 5대 생협연합회 생협법 개정추진위와 함께 20일...

  • HERI
  • 2023.04.21
  • 조회수 216

챗지피티 충격 각계 확산…“AI 읽어낼 비판적 사고력 길러야”

“안전 규약 위해 R&D 중단”호소 AI 석학들도 찬반 의견 엇갈려 “식품·차량처럼 안전보증 필요” 각국 정부, 법률규제 도입 고려 AI로 인한 사기·피싱 막으려면 인공지능 특성 시민교육 나서야 핀란드 헬싱키대학이 스타...

  • HERI
  • 2023.04.17
  • 조회수 290

지역 협동조합 없이 돌봄·복지 어떻게?…지원 축소·폐지 역주행 정부

‘제4차 협동조합 기본계획’ 토론회 기재부 협동조합과 통폐합 뒤 정부 정책 축소 우려 지난 12일 서울 여의도 국회의원회관 제2세미나실에서 ‘협동조합의 질적 성장을 위한 정책방향과 기재부 역할’ 토론회가 열렸다. 박은경 ...

  • HERI
  • 2023.04.17
  • 조회수 205