arXiv:2607.09375：Li Auto, Mach-Mind-4-Flash 발표——35B MoE, 활성 파라미터 3B

중국 자동차 제조사 Li Auto는 간결한 아키텍처와 주요 벤치마크에서의 높은 성능을 결합한 자체 기반 모델 Mach-Mind-4-Flash의 기술 보고서를 발표했습니다——이는 또 다른 비테크 대기업이 자주적 AI 모델 경쟁에 뛰어들었음을 의미합니다.

MoE란 무엇이며, Li Auto가 이 아키텍처를 선택하는 이유는?

**MoE（혼합 전문가）**는 각 입력 토큰에 대해 모든 파라미터가 아닌 파라미터의 하위 집합——이른바 「전문가」——만을 활성화하는 아키텍처입니다. Mach-Mind-4-Flash는 총 350억 파라미터를 갖지만 각 호출당 30억 파라미터만 활성화합니다. 비교하자면, 동일한 활성 파라미터 수를 가진 밀집 모델은 3B 크기가 될 것입니다——복잡한 작업에는 보통 부족하다고 여겨지는 범주입니다. 이 아키텍처를 통해 Li Auto는 유사한 성능의 경쟁 밀집 모델과 비교해 추론 비용을 10~30배 낮출 수 있습니다.

100B+ 모델 클래스의 성능

3단계 훈련 파이프라인——통합 RL/OPD 인프라, 도메인 전문가 훈련, 하이브리드 중앙값 길이 정책 최적화를 통합——을 통해 모델은 활성 파라미터 규모를 초과하는 결과를 달성합니다. 주요 벤치마크: AIME’26 92.70——수학 경시대회 선두 모델과 나란히 하는 수치; 지시 준수를 위한 IFBench 82.82; 함수 호출을 위한 BFCL-v4 75.80; 중국어 웹 검색을 위한 BrowseComp-zh 72.31. Li Auto 기반 모델 팀은 전체 성능이 「100B+ 모델 클래스」에 도달한다고 주장합니다.

자동차 제조사의 모델이 중요한 이유는?

Li Auto는 소프트웨어 회사가 아닙니다——주로 중국 전기차 OEM입니다. 이 움직임은 AI 역량의 수직 통합이 테크 섹터를 넘어 확장되고 있음을 보여줍니다: 자동차 회사들이 자율주행, 차내 어시스턴트, 내부 생산성을 위한 자체 기반 모델을 구축하고 있습니다. Mach-Mind-4-Flash는 특히 중국어 언어 시장을 타깃으로 하는데, BrowseComp-zh 벤치마크에서 이를 확인할 수 있습니다. 낮은 추론 비용은 클라우드 지연 및 비용이 중요한 요소인 차량 엣지 배포에 필수적입니다.