메뉴 보기
link 세부 정보
정보 바로가기 : 中 미니맥스, GPT-4o 넘는 100만 토큰 LLM 공개… 학습비용은 7억 원대
中 미니맥스, GPT-4o 넘는 100만 토큰 LLM 공개… 학습비용은 7억 원대[카테고리 설정이 아직되어 있지 않습니다.]
모델은 효율성을 극대화한 RL 알고리즘 ‘CISPO’로 학습됐고, *MoE(혼합 전문가)* 아키텍처와 고속 추론을 위한 ‘라이트닝 어텐션’ 메커니즘을 도입해 연산 비용을 획기적으로 줄였다. 기술 보고서에 따르면...
