더테크 (THE TECH) - 대한민국 대표 블루오션 테크 미디어

하이퍼클로바X, 한국판 AI 평가 최고점 기록해

[더테크=조재호 기자] 하이퍼클로바X가 국내 언어모델 연구팀의 인공지능(AI) 성능 평가 지표에서 GPT나 Gemini보다 높은 평균 점수를 기록하면서 경쟁력을 입증했다. 네이버클라우드는 27일 하이퍼클로바X가 한국판 AI 성능 평가 체계인 ‘KMMLU(Measuring Massive Multitask Language Understanding in Korean)’에서 오픈AI의 GPT나 구글의 제미나이보다 높은 점수를 기록하며 소버린 AI로서 우수한 성능 경쟁력을 확인할 수 있었다고 밝혔다. KMMLU는 국내 대표적인 오픈소스 언어모델 연구팀인 ‘해례(HAE-RAE)’가 이끈 AI 성능 평가 지표 구축 프로젝트다. 인문학, 사회학, 과학·기술 등 45개 분야와 수학적 추론 능력과 같이 세계에서 공통으로 적용되는 지식을 묻는 문항 비중이 80%, 한반도 지리와 국내법 등 국내 특화 문제 문항 20%로 AI의 보편적 능력과 로컬 지식을 고르게 측정해 한국 사용자에게 유용한 AI를 종합적으로 판단할 수 있다. 오픈AI나 구글 등 북미 기술 기업들이 자사 AI 성능을 확인하기 위해 사용하는 지표인 MMLU를 번역하는 경우, 문항의 부정확한 번역과 함께 문제에 내재된

조재호 기자

2024-02-27 09:38

구글 ‘제미나이’ 공개, 멀티모달 기반의 신규 AI 모델

[더테크 뉴스] 구글의 새로운 인공지능(AI) 모델 ‘제미나이’를 공개했다. 한차례 출시가 연기되면서 내년 초 공개될 것으로 알려졌는데 연내 출시를 강행했다. 최근 오픈AI 이슈와 AI얼라이언스 결성 등 AI 개발 경쟁이 치열해지자 서둘러 움직인 것으로 보인다. 구글은 현지시각 12월 6일, 새로운 AI 모델인 ‘제미나이(Gemini)’를 공개했다. 제미나이는 멀티모달 기반의 AI 모델로 텍스트와 이미지, 오디오, 동영상, 코드 등 다양한 유형의 정보를 이해하고 조합해 활용할 수 있는 모델이다. 가령 사람이 말로 질문을 하면 답변을 텍스트나 이미지로 할 수 있다는 이야기다. 팜2에 이은 신규 AI 모델인 제미나이는 세 가지 크기로 최적화됐다. 방대하고 복잡한 작업에 적합한 제미나이 울트라(Gemini Ultra)와 다양한 작업에 활용하고 확장성이 넓은 제미나이 프로(Gemini Pro), 스마트폰을 비롯한 다양한 IT 디바이스에서 활용될 수 있는 제미나이 나노(Gemini Nano) 등이다. 순다르 피차이(Sundar Pichai) 구글 CEO는 “구글이 한 기업으로서 진행했던 가장 큰 과학적 및 기술적 결과물 중 하나”라며 “앞으로 다가올 변화와 제미나이가