MP
MarkTechPost • 58일 전
IMP 7
문샷 AI, MoE 훈련 최적화 라이브러리 'MoonEP' 오픈소스화
AI 스타트업 문샷 AI(Moonshot AI)가 분산형 전문가 혼합(MoE) 학습을 위한 통신 라이브러리인 'MoonEP'를 오픈소스로 공개했습니다. 이 라이브러리는 대규모 MoE 환경에서 발생하는 전문가 병렬(Expert Parallelism) 통신을 극대화하여 대규모 AI 모델 학습 효율을 크게 높여주는 것이 핵심입니다. 최근 열린 'Kimi K3 오픈 데이' 행사에서 K3 모델 가중치와 함께 소개되며 개발자들은 누구나 자유롭게 이 기술을 활용할 수 있게 되었습니다.
오픈소스 문샷AI MoE