업스테이지-NIA ‘Open Ko-LLM 리더보드’, 2주 만에 100개 모델 돌파

LLM

2023/10/12
  • 업스테이지-NIA 구축 한국어 LLM 리더보드, 개시 2주만에 등록 모델 100개 돌파 쾌거

  • 개인부터 기업까지 다양한 한국어 특화 모델 각축.. 한국어 오픈소스 LLM 구심점 역할 기대

  • 국내 LLM 생태계 외연 확대를 통한 한국 AI 경쟁력 강화 토대 마련한다


 

(업스테이지=2023/10/12) 업스테이지와 한국지능정보사회진흥원(NIA)이 구축한 한국어 거대언어모델(LLM) 평가 리더보드에 등록된 모델이 2주 만에 100개를 넘어섰다.

업스테이지(대표 김성훈)는 지난 27일 개설한 한국어 LLM 평가 리더보드 ‘Open Ko-LLM 리더보드’가 공개 2주 만에 등록 모델 100개를 돌파하는 성과를 거뒀다고 밝혔다.

업스테이지가 NIA와 함께 구축한 Open Ko-LLM 리더보드는 누구나 자신이 개발한 한국어 LLM을 등록하고 다른 모델과 경쟁할 수 있는 공개 플랫폼이다. 특히, 한국어의 특성과 문화를 반영한 고품질의 데이터를 자체 구축해 한국어 특화 리더보드로서의 강점을 갖는다.

Open Ko-LLM 리더보드는 개시 2주 만에 100여 개의 모델이 등록, 추석 연휴에도 불구하고 가파른 확장세를 보였다. 개인 연구자부터 SKT, 마음AI, 포티투마루(42Maru), 한국전자통신연구원(ETRI), 고려대학교 등 다양한 기업과 학계 조직들이 각축을 벌여, 일 단위로 순위 등락을 거듭하며 이목을 집중시키고 있다.

특히, Open Ko-LLM 리더보드에는 ‘Ko-Alpaca’, 고려대학교 ‘KULLM(구름)’, ‘Polyglot-Ko’ 등 기존에 유명한 한국어 오픈소스 모델들이 총집결하는 양상으로, 업계 내에서 한국어 특화 LLM 성능 평가의 바로미터로 자리 잡고 있다는 평가다. 특히, 허깅페이스의 아태지역 총괄이 직접 SNS에 업스테이지 리더보드를 언급하는 등 글로벌에서도 관심을 받았다.

앞으로 업스테이지는 월별 리더보드 순위를 결산해 상위권 모델을 조명하는 한편, 해당 모델을 개발한 연구자들을 초빙해 오픈 세미나를 개최하는 등 국내 LLM 생태계 활성화를 위한 다양한 활동들을 전개할 계획이다. 리더보드 참여에 관심 있는 연구자들은 허깅페이스의 Open Ko-LLM 리더보드 스페이스에서 자세한 정보를 확인하고 참여할 수 있다.

업스테이지는 Open Ko-LLM 리더보드 운영을 통해 한국의 AI 경쟁력 강화를 위한 청사진을 제시한다는 구상이다. 특히, 영어 위주의 기존 평가체제에 더해 한국어 데이터를 기반으로 한 리더보드를 운영함으로써 한국어 LLM 생태계 확장을 위한 밑거름을 다진다. 또한, 다양한 연구자들이 서로의 모델을 자유롭게 공유하고, 공동 연구와 교류를 통해 기술을 더욱 고도화함으로써 국내 오픈소스 LLM 진영의 구심점 역할을 할 것으로 기대를 모으고 있다.

업스테이지 김성훈 대표는 “Open Ko-LLM 리더보드가 2주 만에 100개 모델 돌파라는 뜻깊은 이정표를 세우며 순항하게 되어 기쁘다”라며 “앞으로 업스테이지는 한국어 특화 LLM 성능의 기준점을 제시함으로써 국내 AI 생태계의 성장 및 글로벌 경쟁력 강화에 힘쓸 것”이라고 밝혔다.

한편, 업스테이지의 LLM ‘SOLAR(솔라)’는 지난 8월 허깅페이스가 운영하는 오픈 LLM 리더보드에서 챗GPT의 벤치마크 점수를 넘는 결과로 세계 1위를 차지했다. 최근에는 오픈AI 챗GPT, 구글 팜, 메타 라마, 엔트로픽 클로드 등 4개사의 LLM만 기존에 리스트에 올라 고성능 모델의 기준이 된 Poe의 메인 모델에 솔라가 등록돼 또 한 번 글로벌 시장을 놀라게 했다.

 
 
 

※ 사진 설명 : 업스테이지(대표 김성훈)는 지난 27일 개설한 한국어 LLM 리더보드 ‘Open Ko-LLM 리더보드’가 공개한지 2주 만에 등록 모델 100개를 돌파하는 성과를 거뒀다고 밝혔다.

 
 
  • 김근교 | 브랜드 커뮤니케이션 총괄이사 | keunkyo@upstage.ai
    배성범 | 브랜드 커뮤니케이션 매니저 | sungbae@upstage.ai

    보도자료 다운받기

  • 업스테이지는 2020년 10월에 설립된 국내 대표 AI 스타트업이다. 업스테이지는 허깅페이스 리더보드에서 오픈LLM 역사상 최초로 챗GPT의 벤치마크 점수를 뛰어넘는 성능으로 1위를 차지하며 거대 언어 모델(LLM) 업계에서 두각을 나타내고 있다. 이런 기술력을 기반으로 데이터 보안을 극대화하고 할루시네이션을 해결한 신뢰할 수 있는 프라이빗 LLM의 표준을 제시, 최첨단 기술을 기업이 편리하게 사용할 수 있도록 돕는다. 또한, 업스테이지의 Chat AI ‘AskUp’은 140만 명이 넘는 사용자를 보유, 국내 최대 AI 서비스로 자리매김했다. 또다른 업스테이지 대표 솔루션인 Document AI Pack은 세계 최고 권위 OCR 대회를 석권한 AI OCR 기술을 활용, 효율성과 정확성을 높여 문서 자동화 실현한다. 최소한의 데이터로 사전 학습된 모델을 통해 문서 처리를 최적화함으로써 수작업 방식에 비해 비용과 시간을 획기적으로 최소화한다. 마지막으로, 교육프로그램 ‘에듀스테이지’를 통해 AI 비즈니스 경험을 녹여낸 실습 위주의 교육과 탄탄한 AI 기초 교육을 통해 AI 비즈니스에 즉각 투입될 수 있는 차별화된 전문 인재를 육성하는 교육 콘텐츠 사업에도 적극 나서고 있다.

    업스테이지는 구글, 애플, 아마존, 엔비디아, 메타, 네이버 등 글로벌 빅테크 출신의 멤버를 중심으로 NeurlPS를 비롯, ICLR, CVPR, ECCV, WWW, CHI, WSDM, DMLR 등 세계적 권위의 AI 학회에 다수의 우수 논문을 발표하고, 온라인 AI 경진대회 캐글(Kaggle)에서 국내 기업 중 유일하게 두 자릿수 금메달을 획득하는 등 독보적인 AI 기술 리더십을 다지고 있다. 업스테이지 김성훈 대표는 홍콩과학기술대학교 교수로 재직하면서 소프트웨어공학과 머신러닝을 융합한 버그 예측, 소스코드 자동생성 등의 연구로 최고의 논문상인 ACM Sigsoft Distinguished Paper Award 4회 수상, International Conference on Software Maintenance에서 10년 동안 가장 영향력 있는 논문상을 받은 세계적인 AI 구루로 꼽히며, 총 700만뷰 이상을 기록한 ‘모두를 위한 딥러닝’ 강사로도 널리 알려져 있다. 또한, 업스테이지의 공동창업자로는 네이버 Visual AI / OCR 을 리드하며 세계적인 성과를 냈던 이활석 CTO와 세계 최고의 번역기 파파고의 모델팀을 리드했던 박은정 CSO가 참여하고 있다.

 
Previous
Previous

업스테이지, 세계 최고 권위 학회 'EMNLP 2023’에서 논문 2편 채택

Next
Next

업스테이지-NIA, 한국어 AI 경쟁력 강화를 위한 ‘Open Ko-LLM 리더보드’ 개설