HERI 뉴스
사람은 시각·청각·촉각·추론 활용
대상에 대한 종합적인 인지와 이해

한가지 기능만 뛰어난 도구 AI
통합인지 갖추면 지능폭발 가능

“멀티모달은 인공지능 개발의 성배”
오픈AI, 악용가능성 우려 공개안해

GPT4 ‘멀티모달’ 기능 왜 주목받나

오픈AI가 3월14일 공개한 GPT4에서 통합인지(멀티모달) 기능을 설명하기 위해 예시한 사진. “이 사진에서 이상한 게 뭐야”라는 질문에 GPT4는 “움직이는 택시 지붕에 다리미판을 붙이고 다림질하는 것”이라고 답해, 이미지 이해능력과 추론 능력 수준을 과시했다. 오픈AI 제공
오픈AI가 3월14일 공개한 GPT4에서 통합인지(멀티모달) 기능을 설명하기 위해 예시한 사진. “이 사진에서 이상한 게 뭐야”라는 질문에 GPT4는 “움직이는 택시 지붕에 다리미판을 붙이고 다림질하는 것”이라고 답해, 이미지 이해능력과 추론 능력 수준을 과시했다. 오픈AI 제공

오픈에이아이(Open AI)가 지난 14일 거대언어모델 기반의 인공지능 지피티4(GPT4)를 공개함에 따라 대화형 인공지능 챗지피티(ChatGPT)가 불붙인 논란이 뜨거워지고 있다. 어떤 질문에도 순식간에 그럴듯한 답변을 하고 전문가 수준의 결과물을 내놓는 챗지피티가 지피티3.5 기반의 모델인데, 지피티4에서 인간 지능과 좀더 비슷한 능력을 갖게 될 것이라는 기대가 있다. 반면 일부 개선된 성능에 불구하고 인간 지능과는 근본적으로 구별되는 거짓 지능이라는 비판도 높다.

GPT4, 무엇이 달라졌나?

오픈에이아이에 따르면, 지피티4는 챗지피티에 비해 정확도가 40% 개선됐고 부적절한 요청에 응하지 않을 가능성도 82% 줄었다. 미국 변호사자격시험에서 챗지피티는 하위 10% 성적을 기록한 데 비해, 지피티4는 상위 10% 성적으로 통과하는 등 각종 시험에서 뛰어난 능력을 입증했다. 월 20달러의 챗지피티 유료버전은 지피티4를 적용해 개선된 기능을 이용할 수 있다.


천연덕스러운 거짓말로 인터넷에서 화제가 된 ‘조선왕조실록에 기록된 세종대왕 맥북프로 던짐 사건’에 대해 지피티4는 “세종대왕은 15세기 조선시대 왕이었고, 맥북프로는 21세기 애플의 노트북 컴퓨터”라며 역사적으로 불가능한 사건이라고 ‘바르게’ 답변했다.

지피티4는 이처럼 챗지피티보다 정확도, 인지·추론능력이 크게 개선되었다. 대화메모리도 10배 이상 늘어나 맥락을 유지한 채 긴 대화를 할 수 있어 단편소설도 써낼 수 있다. 지피티4가 글자 아닌 다양한 형태로 대상을 인지할 수 있는 멀티모달(MultiModal) 기능을 탑재할지에 대한 관심도 높았다. 오픈에이아이는 발표에서 지피티4의 멀티모달 기능을 공개했다. 음식 재료가 보관된 냉장고 사진을 보여주면서 “이걸 갖고 어떤 음식을 만들 수 있어?” 질문하자, 지피티4는 가능한 요리와 간단한 조리법을 추천했다.

오픈AI는 GPT4에 멀티모달 기능을 적용했다. 음식 재료가 보관된 냉장고 사진을 보여주면서 “이걸 갖고 어떤 음식을 만들 수 있어?” 질문하자, GPT4는 가능한 요리와 간단한 조리법을 추천했다. 오픈AI 제공
오픈AI는 GPT4에 멀티모달 기능을 적용했다. 음식 재료가 보관된 냉장고 사진을 보여주면서 “이걸 갖고 어떤 음식을 만들 수 있어?” 질문하자, GPT4는 가능한 요리와 간단한 조리법을 추천했다. 오픈AI 제공

통합인지(멀티모달) 기능이란?

다양한 형태의 정보를 통합적으로 인지하는 기능(멀티모달)은 인간 인지의 특징이다. 사람은 ‘딸기’를 인지할 때 시각과 미각·촉각·텍스트를 동원하는 것은 물론이고 “비싼 유기농 딸기를 살까?”와 같은 추론·추상화·욕망 등 온갖 감각과 능력을 통합해낸다. 하지만 컴퓨터와 인공지능은 지금까지 특정한 한 영역에서만 뛰어나고 정확한 능력을 발휘해왔다.

2016년 3월 이세돌9단을 꺾은 알파고의 4-1 승리는 충격적이었지만, 알파고는 바둑판을 넘어서면 세 살배기에 한참 못미쳤다. 2011년 IBM의 인공지능 왓슨이 퀴즈프로그램 제퍼디에서 우승했을 때 미국의 철학자 존 설은 “왓슨은 제퍼디에서 자신이 이긴 줄도 몰랐다”고 지적했는데, 알파고 역시 마찬가지였다.

인공지능이 사진을 보고 의미를 식별하고 추론할 수 있다는 것은 사람의 통합 인지 기능에 다가간다는 점에서 큰 진전이다. 오픈에이아이가 2022년 4월 공개한 이미지 창작도구 달리2(DALL-E2)는 문장을 입력하면 그에 어울리는 이미지를 생성해낸다는 점에서 멀티모달 기능을 일부 구현했다. 오픈에이아이는 지피티4의 멀티모달 기능 시범을 소개했지만, 일반 서비스는 당분간 막혀 있다. 악용가능성에 대한 우려 때문이다.

이는 오픈에이아이가 2019년 2월 거대언어모델 기반 인공지능 지피티2 개발을 발표하면서 핵심인 자동문장생성 기능 서비스를 보류한 것과 비슷하다. 키워드나 문장을 입력하면 그럴듯한 문장을 만들어내는 기능이 가짜뉴스와 사기 등에 악용될 가능성에 대한 우려 때문이었다. 오픈에이아이는 9개월 뒤 이 기능을 공개했고, 이후 매개변수를 1000배 이상 확대한 지피티3을 개발했고 이를 기반으로 챗지피티를 서비스했다.

GPT4가 제시된 이미지를 바탕으로 추천한 요리들. 우유, 달걀, 밀가루, 크림 등이 있는 이미지로부터 팬케이크, 프렌치토스트, 오믈릿, 크레페, 케이크, 머핀, 빵, 비스킷, 푸딩, 커스터드 등이 가능하다고 답변했다. 오픈AI 제공
GPT4가 제시된 이미지를 바탕으로 추천한 요리들. 우유, 달걀, 밀가루, 크림 등이 있는 이미지로부터 팬케이크, 프렌치토스트, 오믈릿, 크레페, 케이크, 머핀, 빵, 비스킷, 푸딩, 커스터드 등이 가능하다고 답변했다. 오픈AI 제공

인공지능의 지능폭발

지피티4의 멀티모달 기능이 본격서비스된다면 또한번 인공지능의 충격이 닥칠 전망이다. <엠아이티(MIT) 테크놀로지리뷰>는 지피티4에 대해 “좋은 멀티모달 모델은 지난 몇 년간 인공지능 개발분야에서 성배와 같다”며 텍스트와 이미지를 결합한 인공지능은 세상을 더 잘 이해할 수 있게 된다고 보도했다.

이미 사람 목소리를 텍스트로 바꾸는 기능은 기기사용법의 혁신을 가져온, 대표적인 멀티모달 기능이다. 이미지를 이해하고 추론해 텍스트로 출력할 수 있게 되면 인공지능은 그야말로 ‘지능폭발’ 단계로 진입하게 된다. 유튜브와 인스타그램, 틱톡 등의 플랫폼에 올라 있는 방대한 영상 데이터를 학습해 추론할 수 있을 뿐 아니라, 자연계 등 물리적 세계를 지각하고 추론해 알려주는 기능을 수행할 수 있다.

국내 1세대 인공지능 연구자인 김진형 카이스트 명예교수는 “지피티4의 영상인식은 현재 한계가 뚜렷하지만 인공지능 개발에서 최고의 목표였던 멀티모달 기능에 대한 구체적인 접근계획을 세울 수 있게 한 성과로, 3~4년 뒤엔 엄청난 능력의 결과물이 나올 것으로 본다”고 평가했다.

구본권 사람과디지털연구소장 starry9@hani.co.kr


한겨레에서 보기 :  https://www.hani.co.kr/arti/economy/it/1084269.html

서비스 선택
댓글
로그인해주세요.
profile image
powered by SocialXE
List of Articles

노동자에 의한, 노동자를 위한 안전망 ‘공제’

불안정 노동자의 사회안전망으로 주목받는 공제 배달노동자 노동조합인 ‘라이더유니온’은 비현실적으로 높은 오토바이 보험료로 어려움을 겪는 배달노동자를 위해 자차 수리비를 지원하는 공제회를 설립했다. 지난 2020년 서울지방고...

  • HERI
  • 2023.05.24
  • 조회수 69

“한국 사회연대경제, K-팝처럼 국제사회 샛별이죠”

유엔 태스크포스 카르펜티에 의장 카르펜티에 의장. “유엔총회에서 채택한 ‘사회연대경제 결의안’은 회원국들에 사회연대경제 지원을 위한 법제도를 마련하도록 권장한다. 결의안은 한국정부도 찬성해 만장일치로 통과했다.” 유엔사...

  • HERI
  • 2023.05.19
  • 조회수 116

챗GPT, 업무 도와줄 만능비서일까? 직업작가 위협할 괴물일까?

MS·구글, 업무도구에 AI 적용 경쟁 IBM “향후 인사관리 분야 채용 안해” 미 온라인 교육업체 실적·주가 폭락 “작가는 AI 활용해 창작·각색 가능, AI 100% 작업결과는 작품 인정 못해” 미 작가노조 요구에 영화사 “수...

  • HERI
  • 2023.05.15
  • 조회수 176

12일 서울사회경제연구소 창립 30주년 기념행사

심포지엄·기념식 서울 프레스센터에서 개최 강철규 이사장, 분열·대립 극복할 신뢰·통합 강조 학현학술상 시상식도…이근 서울대 교수 수상 학현 변형윤 선생 서울사회경제연구소(이사장 강철규·소장 장세진)가 오는 12일 오후 3시30...

  • HERI
  • 2023.05.11
  • 조회수 196

미 특허 실증분석 통한 ‘신흥국 추격론’으로 세계적 명성

13회 학현학술상 수상자/이근 서울대 석좌교수 ‘중진국 함정’극복에 균형-불균형 두 유형 규명 한국, IT 함께 바이오·소부장 등 신사업 육성해야 “학현학술상이 확대 개편된 뒤 첫 수상식인데, 변형윤 선생님이 직접 보지 못하...

  • HERI
  • 2023.05.04
  • 조회수 250

학현학술상 수상자로 이근 서울대 석좌교수 선정

기술혁신과 경제발전 연구에 큰 기여 강창광 선임기자 chang@hani.co.kr 학현학술상위원회(위원장 강철규 서울사회경제연구소 이사장)는 제13회 학현학술상 수상자로 이근(63) 서울대 경제학부 석좌교수를 선정했다고 3일 발표했다. 학현...

  • HERI
  • 2023.05.04
  • 조회수 261

“알고리즘은 깜깜이”, “알고 쓰면 차별개선에 도움”

채용 등 중요 결정 좌우하는 AI의사결정 ‘공정’ 명분 확산 의사결정과정 몰라 ‘블랙박스’ 개인 평판·채용·신용에 큰 영향 알고리즘 현명한 활용 땐 성별 임금 격차, 인종차별 개선 ‘투명하고 알기 쉬운 사회’는 기술을 ...

  • HERI
  • 2023.05.02
  • 조회수 261

“가사노동자의 도우미”…가사서비스종합지원센터 2곳 열려

26일 서울 여의도 한국노총 대회의실에서 열린 가사서비스종합지원센터 개소식에 참여한 참석자들이 기념 사진을 찍고 있다. 26일 오전 서울 영등포구 한국노총 대회의실에서 가사서비스종합지원센터(이하 종합지원센터) 개소식이 열...

  • HERI
  • 2023.04.26
  • 조회수 297

민주당 사회적경제위원회 출범…“윤 정부, 사회적경제 이해 부족”

25일 국회서 이재명 대표 등 200여명 참석 25일 서울 여의도 국회의원회관에서 더불어민주당 사회적경제위원회 출범식이 열렸다. 진선미 의원실 제공. 25일 서울 여의도 국회의원회관 제2소회의실에서 더불어민주당 사회적경제위원회(...

  • HERI
  • 2023.04.26
  • 조회수 278

“정부의 미분양 아파트 매입, 직접 짓는 것보다 2억 비싸”

인터뷰ㅣ경실련 김성달 사무총장 김성달 경실련 사무총장. 홍대선 어젠다센터장 hongds@hani.co.kr 시민단체들은 주택건설 공기업들이 비싼 가격에 주택을 매입해 건설사와 민간업자들의 이익을 챙겨주고 집값 거품을 떠받치는 역할을...

  • HERI
  • 2023.04.24
  • 조회수 234

국회가 허용한 생협 공제, 14년간 표류 왜?

윤영덕 의원 생협법 공제 개정안 대표발의 공정위 우려 수용, 투명성 높이고 조합원 보호할 방안 담겨 더불어민주당 윤영덕 의원(가운데)은 두레·아이쿱·한국대학·한살림·행복중심 등 5대 생협연합회 생협법 개정추진위와 함께 20일...

  • HERI
  • 2023.04.21
  • 조회수 202

챗지피티 충격 각계 확산…“AI 읽어낼 비판적 사고력 길러야”

“안전 규약 위해 R&D 중단”호소 AI 석학들도 찬반 의견 엇갈려 “식품·차량처럼 안전보증 필요” 각국 정부, 법률규제 도입 고려 AI로 인한 사기·피싱 막으려면 인공지능 특성 시민교육 나서야 핀란드 헬싱키대학이 스타...

  • HERI
  • 2023.04.17
  • 조회수 266

지역 협동조합 없이 돌봄·복지 어떻게?…지원 축소·폐지 역주행 정부

‘제4차 협동조합 기본계획’ 토론회 기재부 협동조합과 통폐합 뒤 정부 정책 축소 우려 지난 12일 서울 여의도 국회의원회관 제2세미나실에서 ‘협동조합의 질적 성장을 위한 정책방향과 기재부 역할’ 토론회가 열렸다. 박은경 ...

  • HERI
  • 2023.04.17
  • 조회수 189

‘협동조합의 질적 성장을 위한 정책방향’ 토론회

12일 국회서…한겨레경제사회연구원 후원 조합 활성화를 위한 기재부 역할 등 논의 ‘협동조합의 질적 성장을 위한 정책방향과 기재부 역할'을 주제로 한 국회토론회가 오는 12일 오후 서울 여의도 국회의원회관 제2세미나실에서 ...

  • HERI
  • 2023.04.11
  • 조회수 252

챗GPT는 안전한가…극단주의 양산 ‘소셜 딜레마’ 반복될라

“6개월간 개발중단을” 유명인사들 호소 소셜 미디어의 폐해를 비판한 넷플릭스 다큐멘터리 <소셜 딜레마>의 포스터. 인공지능에 대한 통제가 초기에 이루어지지 않을 경우 ‘소셜(미디어) 딜레마’처럼 ‘인공지능 딜레마’가 재현...

  • HERI
  • 2023.04.03
  • 조회수 345

“RE100 이행 위해 재생에너지 경매제·정부 주도 입지개발 필요”

한겨레경사연 주관 제3회 에너지 정의 포럼 ‘재생에너지 확대 및 RE100 활성화’ 토론회 전문가·학계·경제계 한목소리로 제안 30일 오후 서울 마포구 공덕동 한겨레신문사 청암홀에서 한겨레경제사회연구원 주관으로 열린 ‘재생에...

  • HERI
  • 2023.04.03
  • 조회수 322

중앙사회서비스원 1주년…복지 안전망의 빈틈 채울까

23일 중앙사회서비스원 1주년 기념식 “사회서비스 혁신과 고도화로 공적 책임 강화하겠다” 보편돌봄 제공·복지 사각지대 해소 위해 ‘연결·협력’ 복지혼합 23일 오후2시 서울 중구 신라호텔 루비홀에서 ‘중앙사회서비스원 개원 ...

  • HERI
  • 2023.03.27
  • 조회수 373

재생에너지 확대와 RE100 활성화 위한 토론회 30일 개최

<한겨레> 주최 ‘제3회 에너지 정의 포럼’ 조상민 연구위원·이상준 교수 주제발표 학계·시민환경·경제·공공기관 대표 토론 <한겨레>가 오는 30일 오후 2시부터 서울 마포구 공덕동 한겨레신문사 3층 청암홀에서 ‘재생에너지의 효율...

  • HERI
  • 2023.03.27
  • 조회수 333

이기고도 이긴 줄 몰랐던 알파고, 승리의 기쁨 깨닫게 될까?

사람은 시각·청각·촉각·추론 활용 대상에 대한 종합적인 인지와 이해 한가지 기능만 뛰어난 도구 AI 통합인지 갖추면 지능폭발 가능 “멀티모달은 인공지능 개발의 성배” 오픈AI, 악용가능성 우려 공개안해 GPT4 ‘멀티모달’ ...

  • HERI
  • 2023.03.20
  • 조회수 433

노동·시민사회 연대 포럼 ‘솔라시’ 떴다

7일 노사기금재단·한국사회가치연대기금 공동 주최 노동과 시민사회 연대의 장 모색…9월 본행사 개최 7일 오후 서울 종로구 동숭동 공공그라운드 001스테이지에서 노사기금재단(공공상생연대기금·금융산업공익재단·사무금융우분투재단·전태...

  • HERI
  • 2023.03.10
  • 조회수 427