OpenBMB, 시리즈 첫 MoE 비전 언어 모델 'MiniCPM-V 4.7 35B-A3B' 오픈웨이트 공개(커뮤니티 전언)

확인된 내용 (사실)

OpenBMB가 MiniCPM-V 4.7을 Hugging Face에 공개했다. 전체 파라미터는 35B이며 토큰마다 약 3B만 활성화하는 MoE 구조로, MiniCPM-V 시리즈에서 처음 나온 MoE 모델이다. GGUF 버전도 함께 공개됐다. 단일·다중 이미지와 영상 이해를 지원하며, 'Lookahead Expert Scheduling(LES)' 기법으로 온디바이스 추론을 노린다.

팩트체크 필요 (주장)

OpenBMB는 이 모델을 손실 없이 매끄럽게 온디바이스 추론이 되는 최초의 오픈소스 MoE 모델이라고 소개했다(모델 카드 인용, Reddit 전언).

의미 (해석)

활성 파라미터가 약 3B인 MoE 멀티모달 모델을 기기에서 직접 돌린다는 시도다. 로컬·엣지에서 이미지·영상 이해를 구현하려는 개발자에게 새 선택지가 생겼다.

출처

• 커뮤니티 openbmb/MiniCPM-V-4.7-35B-A3B Reddit