‘AI 1등 대한민국 목표’ 원팀, 초거대 AI모델 만든다

인공지능 1등 대한민국을 목표로 지난해 출범한 KT ‘AI 원팀’이 이번엔 다자간 공동연구를 통해 초거대 AI 모델 개발에 나선다.

초거대 AI란, 대용량의 연산이 가능한 인프라를 바탕으로 대규모 데이터를 학습해 사람처럼 스스로 사고할 수 있도록 설계된 인공지능을 의미한다.

초거대 AI 언어모델은 매우 빠르게 발전하고 있으며, 데이터 정제, 학습 알고리즘, 분산/병렬학습, 경량화, 응용모델 발굴 등 다양한 분야의 연구가 필요하기 때문에 단일 기업이 단독으로 추진하기는 어렵다. 학교와 연구기관에서도 AI 연구를 위한 대규모의 GPU 인프라에 접근하는 것이 쉽지 않다.

이에 AI 원팀에서는 기업의 대규모 투자를 통해 GPU 인프라를 구축하고, 학교와 연구기관은 최신의 연구 동향을 반영한 기술을 제공하는 이상적인 산·학·연 협력 모델을 적용한다.

KT와 AI원팀 참여기관인 한국전자통신연구원(ETRI), KAIST, 한양대는 18일 ‘초거대 AI 모델’을 개발하기 위한 공동 연구 협약을 체결했다.

이번 프로젝트는 각 기관에서 자연어 처리 분야를 대표하는 국내 최고의 연구진으로 구성됐으며, KT의 오랜 사업 경험과 풍부한 데이터를 활용해 초거대 AI 모델을 개발하게 된다.

AI 원팀에서는 초거대 AI 모델 확보를 대한민국 AI 경쟁력 확보를 위한 핵심 의제로 설정하고 6개월 이상 실무 논의와 협력을 지속해 왔으며, 이번 협약 체결로 기관별 역할을 정의하고 본격적 프로젝트 수행에 나선다는 계획이다.

이에 따라 KT는 다른 참여기관들과 힘을 모아 대규모 GPU 인프라 구축, 데이터 수집·분석, 모델 학습, 응용태스크 적용 등 R&D 및 상용화 관련 업무를 총괄적으로 수행한다.

KAIST의 경우, 머신러닝 알고리즘 최적화 및 어플리케이션 파트를 맡게 되며, 한양대는 데이터 정제·필터링 알고리즘 개발, 분산·병렬 알고리즘 및 모델 최적화 분야에서 힘을 보탤 예정이다. 한국전자통신연구원(ETRI)은 대형 모델학습 및 모델개발 분야에 참여하게 된다.

AI 원팀은 올해 말까지 1차로 초거대 AI의 학습을 완료하고, 내년 상반기 내 초거대 AI모델을 상용화 한다는 계획이다. 또한 대규모 AI 연산 인프라를 구축하고, 향후 2000억 파라미터(매개변수) 이상의 모델까지 가능하도록 인프라 규모를 점진적으로 확대할 예정이다.

또한 AI 원팀 연구진은 학습데이터 필터링 강화, 데이터 간 균형 조정 등을 통해 AI의 편향성을 우선 제거하는 한편, 유해 콘텐츠(Toxic Content) 필터링 기술 등 다양한 딥러닝 기반 탐지 기술을 활용해 AI 윤리 이슈도 사전에 차단한다는 계획이다.

이번에 개발하는 초거대 언어모델은 즉시 상용화가 가능한 ‘과제 지향적(Task-Oriented)’ 형태로 설계된다. 이에 초거대 언어모델을 통해 향상된 STT(음성인식), TTS(음성합성), TA(텍스트 분석), 대화 등 요소기술은 먼저 KT 기가지니와 AICC 서비스 고도화를 위해 활용되며, 나아가 제조·금융·물류·유통 등 AI 원팀 참여기업들의 다양한 사업 분야에 적용할 예정이다.

향후 AI 원팀은 영상·로봇 등의 복합인지, 이미지 기반 해석, 휴머니스틱 AI(인간중심 AI) 등에서 초거대 AI 모델로 영역을 확장해 나간다. 이번 연구로 개발되는 초거대 AI 모델은 국내외 많은 기업들과 학교, 연구기관들이 활용해 한국어 AI에 손쉽게 접근하고, 이를 다양한 산업분야에 활용하도록 지원할 계획이다.

이윤근 ETRI 인공지능연구소장은 “ETRI가 보유한 한국어 AI기술인 엑소브레인 원천기술을 보다 발전시켜 초거대 언어모델 프로젝트에 적용함으로써 한국어처리 분야의 AI기술주권 확보에 기여하겠다”고 밝혔다.

홍경표 KT 융합기술원장은 “AI 원팀 소속기관이 보유한 세계적 수준의 기술과 경험을 모두 결집한 초거대 AI모델 개발은 차세대 AI 핵심 원천기술 확보라는 측면에서 각별한 의미를 가진다”며 “이번 프로젝트를 통해 대한민국의 국가 AI 산업 경쟁력 강화에 크게 기여하고, 산업전반의 디지털 트랜스포메이션(디지털 전환)과 고객 라이프스타일 변화를 선도하겠다”고 밝혔다.

한편, 지난해 2월 출범한 AI 원팀(AI One Team)은 KT를 비롯해 ▲한국전자통신연구원(ETRI) ▲카이스트 ▲한양대 ▲현대중공업그룹 ▲LG전자 ▲LGU+ ▲한국투자증권 ▲동원그룹 ▲우리은행 등 총 10개 산·학·연 기업과 기관이 참여하고 있으며, AI 인재양성, Open R&D, AI Eco 강화 등을 위해 힘을 모으고 있다.

[서울=뉴시스]