Kimi.aiが視覚認識能力を評価するベンチマークPerceptionBenchを公開
要点:PerceptionBenchは、既存モデルの失敗パターンから抽出した10種類の視覚認識能力を評価するベンチマークです。推論や外部知識を介さず、純粋な視覚認識能力のみを問う3,000問の検証問題で構成されています。
日本の事業者にとって、なぜ重要?
マルチモーダルAIの視覚認識精度を客観的に測定する指標として、モデル選定や開発時の評価基準となる可能性があります。
元記事
We are releasing PerceptionBench, a benchmark that isolates visual perception and evaluates it as a …
元記事を読むAI評価
外部公開データの選定スコアです。評価元の掲載内容も確認できます。
選定元:AI HOT