메뉴

#큐타이

MP
MarkTechPost • 3일 전
IMP 7

큐타이, 강화학습으로 음성 수학을 푸는 음성 네이티브 모델 'Voice of Reason' 공개

프랑스 연구소 큐타이(Kyutai)가 GLM-4-Voice-9B 기반의 오픈 웨이트 음성 대 음성(speech-to-speech) 모델 'Voice of Reason' 2종을 공개했습니다. 지도 미세조정(SFT)과 강화학습(RL)을 통해 음성 기반 GSM8K 수학 정답률을 27.3%에서 77.1%로 끌어올렸으며, 전사(transcription)나 텍스트 LLM 없이 순수 음성만으로 추론합니다. 두 체크포인트는 허깅페이스에 공개되어 있고 H100 GPU 한 장으로 실행 가능합니다.

음성 AI 강화학습 오픈소스
MP
MarkTechPost • 77일 전
IMP 7

큐타이, 다중 악기 MIDI 변환 트랜스포머 'MuScriptor' 공개

큐타이(Kyutai)는 오디오를 다중 악기 MIDI로 변환하는 오픈 웨이트 디코더 전용 트랜스포머 모델인 'MuScriptor'를 공개했습니다. 이 모델은 실제 녹음본과 대규모 합성 MIDI 데이터를 학습하여 복잡하게 믹스된 다중 악기 연주를 정확하게 악보(MIDI)로 전사할 수 있습니다. 관련 벤치마크, 악기 조절 기능, 대화형 데모까지 제공되어 오디오 및 음악 AI 실무자들에게 매우 유용한 오픈소스 도구입니다.

음악 AI 트랜스포머 오픈소스