AI LAB / KEYWORD DICTIONARY

AI学習手法

Self-Improving AI(自己改善型AI)とは?

本項では、Cogito資料にあるiterative self-improvementを表す説明表現。Cogitoモデルが反復蒸留・増幅によって学習されたことを指し、運用中の自律的な自己書き換えを意味しない。

仕組みと使いどころ

Self-Improving AIは、参照資料で一般概念として定義された正式分類名ではない。本項では、Cogito v1-previewモデルの学習について使われているiterative self-improvementという説明を指す。資料によれば、Cogitoの大規模言語モデルはIterated Distillation and Amplification、略してIDAという学習・アラインメント戦略で訓練されている。ただし、資料本文はIDA内部の更新手順や、各反復で何をどのように改善するかを詳しく説明していない。また、Cogitoには直接回答する通常モードと、回答前に自己省察するモードがあるが、これは回答生成時の動作モードであり、モデル自身が運用中に重みや学習方法を継続的に変更することの証拠ではない。したがって、この語から人の関与が不要な自律的自己改変まで推定してはならない。

Self-Improving AIの活用例

たとえば、こんな場面で

Cogito v1-previewは、反復的自己改善を用いるIDAで学習されたモデルとして説明されている。利用時には、直接回答するモードと、回答前に自己省察するモードを選択できる。

使うときのポイント

「自己改善」という表現を見たら、学習時の戦略、回答時の自己省察、運用中のモデル更新を区別する。資料に更新対象や手順が示されていなければ、自律的な継続学習や自己書き換えを断定しない。

参考資料

deepcogito/cogito-v1-preview-llama-3B · Hugging Face (新しいタブで開きます)

用語の説明や活用例に関連する参考資料です。

READ & LEARN

用語を知ったら、活用を知る。

AI LABで、AIの動向や業務に取り入れるヒントを読む。

記事一覧を見る