검수요청.png검수요청.png

아야23

위키원
Asadal (토론 | 기여)님의 2024년 9월 24일 (화) 23:14 판
(차이) ← 이전 판 | 최신판 (차이) | 다음 판 → (차이)
이동: 둘러보기, 검색

아야23(Aya 23)은 캐나다 스타트업 코히어(Cohere)가 2024년 출시한 23개 언어를 지원하고 오픈소스로 제공되는 최신 거대언어모델(LLM)이다.

아사달 스마트 호스팅 가로 배너 (since 1998).jpg
이 그림에 대한 정보
[아사달] 스마트 호스팅

개요

아야 23은 코히어의 비영리 연구 기관인 C4AI에서 출시한 거대언어모델로, 2024년 2월에 출시된 '아야 101'의 고도화 버전이다. 아야 23은 총 23개 언어를 지원하며, 전 세계 인구의 절반 이상이 사용하는 언어를 포괄하는 것이 특징이다. 한국어를 비롯해 중국어, 일본어, 아랍어, 힌디어 등 다양한 아시아 언어와, 영어, 독일어, 프랑스어, 스페인어, 러시아어 등 여러 유럽중동 언어가 포함되어 있다. 이를 통해 다양한 문화와 지역에서 사용할 수 있는 다국어 모델로 자리매김하고 있다. 아야 23의 가장 큰 개선점 중 하나는 성능 향상이다. 이전 버전인 '아야 101'은 전 세계 119개국에서 3,000명 이상의 연구자가 자발적으로 참여한 '아야 프로젝트'를 기반으로, 101개의 언어를 지원하는 거대한 모델로 탄생했다. 그러나 너무 많은 언어를 지원하면서, 특정 언어에서의 성능이 떨어지는 문제가 있었다. 이를 보완하기 위해 아야 23은 언어 범위를 좁히고, 그 대신 각 언어별 성능을 강화했다.[1]

기술적 특징

아야 23은 두 가지 매개변수 옵션인 8B와 35B로 개발되었다. 매개변수의 크기가 클수록 모델의 세부적인 학습과 정보 처리 능력이 향상된다. 아야 23은 이전 모델에 비해 식별 작업 성능이 최대 14%, 생성 작업 성능이 20%, 다국어 MMLU(수학적 언어 이해력)는 41.6%까지 향상되었으며, 특히 다국어 수학적 추론은 6.6배나 증가했다. 이러한 성능 향상은 아야 23이 다국어 지원뿐만 아니라 언어 간의 복잡한 작업을 훨씬 더 효과적으로 처리할 수 있음을 보여준다.

아야 23의 성능은 구글젬마(GEMMA)나 미스트랄 AI(Mistral AI)의 믹스트랄(MIXTRAL)과 비교했을 때도 일부 영역에서 더 우수하다는 평가를 받고 있다. 특히 다국어 모델에서 흔히 어려운 작업인 자연스러운 생성 작업과 수학적 추론 능력에서 강점을 보인다.[1]

오픈소스 접근성

코히어는 아야 23의 매개변수인 가중치(Weights)를 허깅페이스(Hugging Face) 플랫폼을 통해 오픈소스로 공개했다. 이는 연구자와 개발자가 자유롭게 이 모델을 활용하고, 다양한 응용 프로그램을 개발할 수 있도록 돕기 위한 것이다. 가중치는 AI 모델의 학습된 정보가 응축된 부분으로, 이를 공개하는 것은 외부 연구자들이 모델을 더 발전시키고 커스터마이징할 수 있는 큰 기회를 제공한다. 일반적으로 AI 모델의 가중치는 비공개로 유지되는 경우가 많지만, 코히어는 이를 개방함으로써 인공지능 기술의 발전을 촉진하는 선도적인 역할을 하고 있다.[2]

성능

아야 23은 전반적으로 아야 101에 비해 생성 작업에서 20%, 다국어 MMLU에서 41.6% 향상된 성능을 자랑하며, 특히 수학적 추론 작업에서 6.6배나 성능이 증가했다. 이는 복잡한 논리적 문제 해결이 필요한 환경에서 아야 23이 매우 유용할 수 있음을 의미한다. 또한, 아야 23은 특정 언어에서의 성능 저하 문제를 해결하고, 지원하는 각 언어에서 높은 품질의 결과를 제공할 수 있도록 개선되었다. 이는 단순히 여러 언어를 지원하는 것을 넘어서, 사용자가 사용하는 언어의 구체적인 요구 사항에 더 잘 맞춘 응답을 제공한다.[1]

활용 가능성

아야 23은 다양한 언어 지원을 통해 글로벌 비즈니스, 연구, 번역, 콘텐츠 생성 등 다양한 분야에서 유용하게 사용될 수 있다. 특히 다국어 기반의 서비스와 애플리케이션 개발에 적합하며, 고도화된 언어 모델을 필요로 하는 복잡한 작업에서도 뛰어난 성능을 발휘할 수 있다. 또한, AI 연구자들은 아야 23의 오픈소스 가중치를 활용하여 맞춤형 모델을 개발하거나, 기존 애플리케이션에 통합할 수 있는 가능성을 열어 두었다.

각주

참고자료

같이 보기


  검수요청.png검수요청.png 이 아야23 문서는 인공지능 서비스에 관한 글로서 검토가 필요합니다. 위키 문서는 누구든지 자유롭게 편집할 수 있습니다. [편집]을 눌러 문서 내용을 검토·수정해 주세요.