Cognition社がDevinにおけるOpenAI o1シリーズの性能評価結果を公開
要点:AIエンジニアリングツール「Devin」を開発するCognition社は、o1シリーズを用いたコーディング性能の評価結果を公開しました。内部ベンチマークにおいて、o1-previewはGPT-4oを大きく上回る成果を示しています。
日本の事業者にとって、なぜ重要?
AIによる自動コーディングの精度向上は、ソフトウェア開発の生産性に直結するため、開発現場でのAI活用戦略を再考する重要な指標となります。
元記事
A review of OpenAI’s o1 and how we evaluate coding agents
元記事を読むAI評価
外部公開データの選定スコアです。評価元の掲載内容も確認できます。
選定元:AI HOT