最近Jevが話題になっているので、実際に環境を構築して試してみた。
結論から言うと、推論速度は速くコストも低い。ただ、精度はQwen3 4Bとほぼ同じレベルだった。
小さな改善を、あたかもとてつもないブレークスルーであるかのように見せている印象が拭えない。
ちなみに、利用規約(ToS)にはベンチマーク結果の公開を禁止する条項が含まれている。
Go to list of users who liked
Share on X(Twitter)
Share on Facebook
最近Jevが話題になっているので、実際に環境を構築して試してみた。
結論から言うと、推論速度は速くコストも低い。ただ、精度はQwen3 4Bとほぼ同じレベルだった。
小さな改善を、あたかもとてつもないブレークスルーであるかのように見せている印象が拭えない。
ちなみに、利用規約(ToS)にはベンチマーク結果の公開を禁止する条項が含まれている。
Register as a new user and use Qiita more conveniently
Go to list of users who liked