온라인 교육 플랫폼 ‘딥러닝 AI’ 사전학습 강의
LLM 기술 노하우 전수…국내 기업 최초로 참여
세계 4대 AI 석학으로 불리는 딥러닝의 선구자 앤드류 응(Andrew Ng) 미국 스탠퍼드대 교수가 국내 인공지능(AI) 전문 기업 업스테이지와 함께 거대언어모델(LLM) 기술 노하우를 전수한다.
업스테이지는 글로벌 온라인 교육 플랫폼 '딥러닝 AI'를 통해 LLM 개발 강좌를 무료로 선보인다고 18일 밝혔다.
딥러닝 AI는 앤드류 응 교수가 개발한 교육 플랫폼으로, 응 교수의 특화 과정부터 오픈AI·구글·메타·마이크로소프트(MS) 등 빅테크 기업들의 다양한 AI 수업을 운영 중이다. 국내 기업 중에서는 업스테이지가 최초로 참여한다.
업스테이지는 자체 LLM '솔라'를 개발한 노하우를 바탕으로 응 교수와 함께 기획한 LLM 사전학습 강의를 선보인다.
사전학습은 방대한 텍스트 데이터를 기반으로 AI 모델에게 언어적 능력을 학습시키는 과정이다. 문장 생성·문맥 추론 등 고도의 자연어 처리 능력을 갖춘 LLM 개발의 핵심 뼈대를 이룬다.
김성훈 대표와 박은정 최고과학책임자(CSO)는 직접 이론적 기초부터 데이터셋 준비, 모델 훈련 및 벤치마크 테스트 기반 성능 평가까지 LLM 사전학습의 전 과정을 세밀하게 짚어준다. 강의는 영어로 진행되며, 기초적인 코딩 및 머신러닝 지식만 있으면 누구나 수강할 수 있다.
특히 솔라의 핵심 기술인 '깊이 확장 스케일(DUS)' 방법론을 중심으로 매개변수를 경량화해 학습 비용을 절감하는 방법과 오픈소스로 공개된 사전학습 모델을 기반으로 손쉽게 추가 데이터를 학습시키는 방법 등 실무 노하우도 전수할 예정이다.
김 대표는 “앞으로 'AI로 세상을 이롭게 한다'는 철학을 토대로 더 많은 사람들이 최신 지식을 습득할 수 있도록 앞장설 것"이라고 밝혔다.