AI LAB / KEYWORD DICTIONARY

基礎知識

Artificial Analysis Intelligence Index(Artificial Analysis知能指数)とは?

Artificial Analysisが、言語モデルの知識業務、コーディング、科学、一般知識の能力を9種類の評価から集約し、0〜100で示す複合ベンチマーク指標。

仕組みと使いどころ

Artificial Analysis Intelligence Indexは、Artificial Analysisが独立して実施する言語モデル評価の総合指標です。v5.0では9種類の評価を、知識業務、コーディング、科学、一般の4分野に分類し、各分野を25%として加重平均します。複数分野の性能を一つのスコアで比較できますが、主に英語のテキスト課題で構成され、一部のみ画像入力を含みます。多言語、音声、視覚推論は別に評価されるため、この指数だけで特定用途への適合性やあらゆる能力を判断することはできません。

Artificial Analysis Intelligence Indexの活用例

たとえば、こんな場面で

複数の言語モデルを広い能力範囲で比較する際、総合スコアを最初の目安として参照できます。その後、コーディングや科学など、実際の用途に近い個別評価の結果を確認する使い方が考えられます。

使うときのポイント

比較時は指数のバージョン、モデルの推論設定、個別評価の内訳を確認します。総合順位やスコアだけで導入効果を断定せず、目的に近い評価結果を優先してください。

参考資料

Artificial Analysis Intelligence Index v5.0 | Artificial Analysis (新しいタブで開きます)Intelligence Benchmarking | Artificial Analysis (新しいタブで開きます)Announcing Artificial Analysis Intelligence Index v5 (新しいタブで開きます)

用語の説明や活用例に関連する参考資料です。

READ & LEARN

用語を知ったら、活用を知る。

AI LABで、AIの動向や業務に取り入れるヒントを読む。

記事一覧を見る