AI関連 Step 3.5 Flash:196B相当を11Bで動かす超効率LLMの登場
「70B 以上じゃないと精度が足りない。でもそんな GPU 台数、現実的じゃない。」ここ半年くらい、プロダクション導入の相談を受けると、だいたいこの会話から始まります。eval では 8B/13B だとギリギリ70B にすると精度は良いけど...
AI関連
AI関連
AI関連