CloudflareがJevっぽい意思決定モデル「Clef」を公開、画像入力に対応しベンチマークではJev超えだがJev作者はベンチマークそのものに懐疑的

この記事についての感想

Cloudflareがぶっ込んできた新モデルClef、正直なところ名前の響きからしてJevへの対抗意識がバチバチで笑うしかない。マルチモーダル対応でベンチマークスコアがJevを上回ったっていうニュースは界隈で結構騒がれてるけど、本家のJev作者が即座にベンチマークの公平性に対して懐疑的なコメントを出してるのが最高にプロレスしてて面白い。ぶっちゃけ今のAI界隈って、新しいモデルが出るたびに「うちはこれだけスコア高いぜ！」ってマウントの取り合いが続いてて、ベンチマークがもはやインフレ気味っていうか形骸化してる感は否めないよね。特定のタスクに合わせて調整されたベンチマークだと、実際の実用性とは乖離することもあるし、作者が疑問を呈するのもまあ分かる気がする。とはいえ、Cloudflareがインフラ屋の強みを活かして画像入力対応の高性能モデルを出してきたってことは、エッジAIとかでの活用を相当意識してそう。サーバーの負荷分散とかセキュリティまわりで、こういったモデルがシームレスに組み込まれるようになったら激アツだよね。結局のところ、ベンチマークの数字だけで踊らされるんじゃなくて、実際に触ってみて現場で使えるかどうかが全てなんだよな。まあ、ベンチマーク戦争自体が技術進歩の燃料になってる側面もあるから、外野としてはこのままバチバチにやり合って、どんどん賢いモデルを世に出してほしいってのが正直な気持ち。Jevがベンチマークの指標を再定義するような動きを見せるのか、それともClefが圧倒的な実用性で黙らせるのか、今後の推移が楽しみでしかない。