3월 6일 비즈니스 인사이더는 푸틴 대통령이 러시아가 글로벌 AI 경쟁에서 두각을 나타내고 중국과 미국을 능가하기를 희망하지만 실제로 러시아의 주력 대형 언어 모델은 눈에 띄지 않으며 심지어 매우 낙후되었다고 말할 수 있다는 기사를 게재했습니다. 2024년 12월 푸틴 대통령은 '인공지능을 향한 여정' 국제회의에서 이렇게 말했다.러시아는 인공지능 분야에서 중국, 미국을 따라잡을 뿐만 아니라 글로벌 리더가 되고 싶어 한다.
이제 러시아어 버전의 대형 언어 모델 경쟁 플랫폼(LLMArena)에서는러시아 대형 모델 GigaChatMAX 공동 8위, Claude, DeepSeek 및 ChatGPT의 여러 버전보다 뒤떨어져 있습니다. 러시아의 또 다른 큰 언어 모델YandexGPT4Pro는 훨씬 낮은 순위로 공동 18위를 기록했습니다.
영어 버전에서는 두 모델 모두170개 이상의 대형 언어 모델 순위에 포함되지 않았습니다.
GigaChatMAX는 러시아 국영 은행 Sberbank에서 개발했습니다. 지난 11월 최신 버전이 출시되었을 때 모스크바에 본사를 둔 수석 개발자 Evgeny Kosarev는 "러시아어 및 영어 품질에서 GPT4o에 가깝다"고 말했지만 전문가들은 Business Insider에 다음과 같이 말했습니다.GigaChatMAX는 미국 및 중국 경쟁사보다 몇 달 뒤처져 있습니다.
King's College London의 수석 연구원인 Lukash Oleinik은 현재 GigaChatMAX의 성능이 "보통 수준"이라고 말했습니다. 해당 모델은 인공 지능의 효율성을 테스트하는 데 사용되는 벤치마크에서 "훨씬 낮은" 점수를 받았습니다. 그는 또한 다음과 같이 덧붙였습니다.어떤 최첨단 모델도 능가하지 않으며 특별히 혁신적인 것도 아닙니다.
유럽 정책 분석 센터의 선임 연구원이자 데이터 분석 회사인 Omelas의 최고 기술 책임자인 Ben Dubo는 GigaChatMAX가 여러 측면에서 장점이 부족하다고 덧붙였습니다. Dubo는 지난 1월 Moscow Times에 수학 분야에서는 좋은 성적을 거두었지만 일부 벤치마크에서는 러시아어 기능이 대부분의 주요 서양 및 중국어 대형 언어 모델보다 훨씬 뒤처졌다고 썼습니다.
그는 미국의 대형 언어 모델이 업계 표준인 '대규모 다중 작업 언어 이해'(MMLU) 테스트에서 현재 GigaChatMAX 수준보다 1년 앞서 있다고 말했습니다. Dubbo는 또한 Business Insider에 대부분의 AI가 고급 벤치마크에서 테스트되고 있으며 MMLU는 "현재 거의 쓸모없는 것으로 간주됩니다"라고 말했습니다.
더보는 이렇게 말했습니다."러시아어 프롬프트에서 미국과 중국 모델을 능가하는 것이 러시아 정부 인공 지능 전략의 최우선 과제이지만 MAX는 아직 이 목표를 달성하지 못했습니다."
전략 및 국제 연구 센터의 러시아 군사 기술 전문가인 Samuel Bendett는 Business Insider와의 인터뷰에서 인공 지능이 러시아에게 "상태의 상징"이라고 말했습니다. 그런데 영국 미디어 스타트업 터틀미디어(Turtle Media)가 발표한 글로벌 인공지능 순위에 따르면 미국, 중국, 프랑스, 영국, 러시아 등 주요 5개국 중러시아는 31위로 1위가 아닌 유일한 국가이다.
Bendett는 러시아에는 "OpenAI, Microsoft, Google, Huawei 또는 Alibaba와 같은 회사가 없습니다"라고 말했습니다.
지난 2월 DeepSeek이 글로벌 AI 환경을 뒤흔들자 러시아 국영 은행 Sberbank는 중국 연구자들과 공동 AI 프로젝트를 시작할 계획이었습니다. 은행의 첫 번째 부회장인 Alexander Wei Jiaxin은 DeepSeek의 성공이 고투자 "미국식 솔루션"이 아닌 저비용 솔루션을 찾는 Sberbank의 전략과 일치한다고 로이터에 말했습니다.
Wei Jiaxin은 "Sberbank에는 많은 과학 연구원이 있습니다. 우리는 그들을 중국 연구원과 공동 연구 프로젝트를 수행하는 데 사용할 계획입니다."라고 말했습니다.