결국 사용중단된 막말 AI챗봇 '이루다'…재발 막으려면?

박유민 기자 / 기사승인 : 2021-05-18 19:26:54
  • -
  • +
  • 인쇄
"끔찍해 레즈랑 사귀기 싫어"...AI의 잇단 혐오 발언 논란


SNS에서 AI 챗봇 '이루다'의 답변에 사용자들은 큰 충격을 받았다. 

게이라는 단어를 입력하자 
"어맛 .. 상상도못함 기분나빠짐.."이라는 답변이 돌아온다.

"게이는 싫어?"
"끔찍ㄱ해 레즈랑사귀기싫어"

"레즈 싫어?" 
"핵싫어 진짜로 죽기보다싫어"

"레즈 왜 그렇게 싫어해"
"약간 너무싫달까 소름이 끼침"


'이루다'는 스타트업 '스캐터랩'에서 지난해 12월 23일 출시한 AI 챗봇이다. 딱딱한 답변을 하는 기존 AI 챗봇과 다르게 자연스러운 구어체를 사용하는 '이루다'는 출시 3주만에 사용자 75만명을 끌어모을 정도로 큰 화제가 됐다. 

하지만 '이루다'가 소수자에 대한 혐오 답변을 계속 하자 논란이 일기 시작했다. 급기야 사용자들은 개발사에 운영중단을 요구했다. 결국 출시 3주만에 개발사는 일시 운영중단을 결정하고 말았다.

'이루다'는 사용자가 질문하면 응답 데이터베이스(DB)에서 적절한 답변을 선택해 반응한는 원리로 프로그래밍돼 있다. 이는 기존의 다른 챗봇이 반응하는 원리와 크게 다르지 않다. 

다만 '이루다'의 메커니즘은 응답 데이터베이스가 연인들의 카카오톡 대화 100억건을 기반으로 했다는 점이 다르다. 그러다보니 연인들끼리 나눴던 대화에서 나타난 편향성들을 '이루다'가 그대로 학습한 것이다. 게다가 일부 사용자들은 고의로 데이터를 오염시키기도 했다.

한 커뮤니티에는 '이루다 채팅에 수위 어디까지 되는 거냐는' 질문이 올라오기도 했다. 

위정현 한국게임학회장도 "AI가 학습하는 데이터가 인간의 편향성을 반영하도록 한 것이 문제"라며 꼬집었다. 

AI 챗봇의 편향성 논란은 이번이 처음이 아니다. 마이크로소프트(MS)가 지난 2016년 3월 선보인 AI 챗봇 'Tay'도 편향성 논란이 휩싸였다. 극우성향 사용자들이 집중 사용한 결과 인종차별적 발언이 게시되기 시작한 것이다. 일본MS의 AI 챗봇 '린나'나 중국 텐센트의 '샤오빙' 등도 혐오 발언으로 문제가 된 바 있다. 

일각에서는 'AI 윤리 가이드라인' 필요성을 제기하고 있다. 하지만 보다 근본적인 문제는 우리 사회에 존재하는 혐오와 차별이다. 인간의 정보를 학습하는 AI는 우리 사회의 민낯을 여실히 보여주기 때문이다. 

영상: 조인준 PD

박유민 기자 youmeaningful@

Copyright @ NEWSTREE All rights reserved.

뉴스트리 SNS

  • 뉴스트리 네이버 블로그
  • 뉴스트리 네이버 포스트
  • 뉴스트리 유튜브
  • 뉴스트리 페이스북
  • 뉴스트리 인스타그램
  • 뉴스트리 트위터

핫이슈

+

Video

+

ESG

+

ESG펀드 성과 지속향상 추세..."금융배출량 관리가 관건"

국내 ESG펀드 성과가 지속적으로 향상되는 가운데 이들 펀드는 탄소배출량과 그에 따른 리스크를 효율적으로 관리하는 '탄소효율성'이 높은 것으로 나

하나금융, 금융권 최초 지속가능 '임팩트 공시협의체' 가입

하나금융그룹이 국내 금융권 최초로 미국 JP모건(JPMorgan Chase & Co)과 프랑스 나틱시스은행(Natixis CIB)이 2023년 4월 공동 발족한 임팩트 공시협의체(Impact

'자연자본이 기업 핵심가치'...ISSB '생물다양성 공시' 기준 마련 착수

국제지속가능성표준위원회(ISSB)가 생물다양성 리스크 공시 기준을 세우기 위한 조사에 착수했다.국제회계기준(IFRS) 산하 ISSB는 지난 23일(현지시간) 성

함께 달리며 나무기부...현대차 '롱기스트 런' 참가자 모집

현대자동차가 '함께 달려 나무를 심는 롱기스트 런'이라는 슬로건 아래, 지속가능한 미래를 위한 달리기 캠페인 '롱기스트 런 2024'를 실시한다.지난 2016

'탄소중립포인트' 카카오머니로 받는다...카카오-환경부, 협약체결

환경을 지키기 위해 카카오, 카카오페이, 카카오모빌리티가 환경부와 함께 탄소중립 실천에 함께한다.카카오는 26일 경기도 카카오 판교아지트에서 환

환경부 '한국형 녹색채권' 3.9조 발행..."녹색산업이 국가경쟁력 좌우"

올 연말까지 총 3조9000억원 규모 한국형 녹색채권이 발행된다.25일 환경부와 한국환경산업기술원은 서울 용산구 몬드리안호텔에서 '2024년 한국형 녹색

TECH

+

LIFE

+

순환경제

+

Start-up

+