BL
r/LocalLLaMA • 10일 전
허깅페이스 벤치마크, 모델 크기 필터링 기능 추가
IMP 6/10
핵심 요약
허깅페이스(HuggingFace)의 벤치마크 데이터셋 페이지에 모델 크기 기준 필터링 기능이 새롭게 추가되었습니다. 이제 개발자들은 특정 파라미터 크기(예: 32B 이하)를 가진 모델들 중 특정 벤치마크에서 가장 뛰어난 성능을 보이는 모델을 직관적으로 찾아낼 수 있습니다. 자원 대비 최적의 성능을 내는 모델을 탐색하는 실무자들에게 매우 유용한 업데이트입니다.
번역된 본문
예를 들어 32B(320억 파라미터) 이하의 모델 중 SWE-bench Verified 벤치마크에서 가장 우수한 성능을 기록하는 모델이 무엇인지 확인할 때 매우 유용합니다. https://huggingface.co/datasets?benchmark=benchmark:official&sort=trending
원문 보기 (영어)
Quite useful to see which model under 32B performs best on swebenchverified for example.
[https://huggingface.co/datasets?benchmark=benchmark:official&sort=trending](https://huggingface.co/datasets?benchmark=benchmark:official&sort=trending)