Google は先週開発者向けに発表している最新の Gemini 1.5 Pro-002 モデルを、Gemini Advanced で利用できるようになったことを発表しました。すでに日本でもリリースされており、Gemini の最新情報が更新されています。
Gemini Advanced に最新の 1.5 Pro-002 モデルが搭載されることで、数学や複雑なトピックに関連するプロンプトに対して、より的確で正確な回答を提供できるようになるとしています。また、複数ステップの詳細な指示を出す場合でも、高度な数学の計算の問題に取り組む場合でも、容易に解決できるよう支援します。
Google が開発者向けに、以前のバージョンと比較した場合に次のような改善点を挙げています。
- 人気のMMLUベンチマークのより難しいバージョンであるMMLU-Proでは約7%の増加が見られます。
- MATH と HiddenMath (競技用数学問題の内部ホールドアウト セット) ベンチマークでは、両方のモデルで約 20% の大幅な改善が見られました
- ビジョンとコードの使用例では、視覚的理解と Python コード生成を測定する評価全体で、両方のモデルのパフォーマンスが優れています (約 2 ~ 7% の範囲)
詳細はこちらをご確認ください。