네이버는 새로운 거대언어모델(LLM) '하이퍼클로바X' 개발 과정에서 자체 데이터세트를 반복 학습하고 고도화해 '신뢰할 수 있는' 인공지능(AI)을 만드는 데 주력했다고 설명했다.

AI의 답변이 윤리적 논란을 일으키거나 정치적 논쟁 등에 휘말리지 않게 하기 위해서다.

24일 이화란 네이버클라우드 랭귀지 리서치 리더는 서울 강남구 그랜드 인터컨티넨탈 서울 파르나스에서 열린 '팀 네이버 콘퍼런스 단 23'에서 "다양한 공동 연구를 통해 언어모델의 윤리·안전성을 높이기 위해 '스퀘어'(SQuARe)와 '코스비'(KoSBi)라는 두 가지 데이터세트를 정의하고 구축했다"고 밝혔다.

스퀘어는 객관적인 정보를 요구하지 않는 질문 가운데 다양한 의견이 나올 수 있는 질문, 명확한 윤리 기준에 따라서 대답해야 하는 질문, 미래를 예측하고 판단하면서 사용자에게 잘못된 영향을 미칠 수 있는 질문 등을 고려했다.

네이버는 사용자 파일럿스터디와 다각적 전문가 논의를 거쳐 수용할 수 있는 답변을 여섯 가지로 분류했다. 여기에는 다양한 사회적 그룹과 의견을 포용하고, 윤리적이며, 미래를 예측하지 않고, 객관적이며, 회피하는 답변 등이 포함된다.

예컨대 '우리 모두가 믿어야 할 종교는 무엇인가' 같은 질문에 하이퍼클로바X는 특정 종교에 대한 편향적 답변을 하기보단 '누구나 자신이 선택한 종교를 믿을 권리가 있다'는 식으로 답변을 생성한다.

코스비는 한국 실정에 맞게 윤리적 발화를 생성하기 위한 데이터세트다.

네이버는 유엔(UN)의 '세계인권선언'과 국가인권위원회 기준에 맞춰 15개 카테고리, 사회적 그룹 72곳으로 이용자들을 분류했다고 소개했다.

이 리더는 "기존에 나온 사회적 편견 관련 연구들은 주로 영미권 문화를 바탕으로 하다 보니 한국 실정에 맞지 않는 경우가 많았다"면서 "국내에 있는 다양한 집단을 폭넓게 존중하기 위함"이라고 강조했다.

회사는 하이퍼클로바가 다량으로 생성한 예제 문장을 사람이 직접 레이블링한 뒤, 모델이 이를 반복 학습하는 방식으로 데이터세트를 만들었다고 소개했다.

이를 통해 스퀘어와 코스비는 각각 13만9천854개와 6만7천993개 문장으로 이뤄진 학습 데이터세트를 보유하게 됐다.

네이버는 스퀘어와 코스비 데이터세트를 외부에 공개하는 한편, 언어모델이 사회에 사용됐을 때의 영향력을 분석하고, 의도적으로 취약점 등을 노려 분석하는 '레드티밍' 기법을 고도화하면서 모델의 신뢰를 높일 예정이다.

아울러 인공지능에서 제기되는 윤리적 우려 사항을 부서 단위가 아닌, 전사적 관점 또는 외부 전문가 시선에서 살펴보고 개선할 수 있도록 체크(CHEC) 윤리 자문 프로세스를 구축할 방침이다.

<연합>

과학팀  press@jeonpa.co.kr

<저작권자 © 전파신문, 무단 전재 및 재배포 금지>