01 / UNDERSTAND
仕組みと使いどころ
Self-Improving AIは、参照資料で一般概念として定義された正式分類名ではない。本項では、Cogito v1-previewモデルの学習について使われているiterative self-improvementという説明を指す。資料によれば、Cogitoの大規模言語モデルはIterated Distillation and Amplification、略してIDAという学習・アラインメント戦略で訓練されている。ただし、資料本文はIDA内部の更新手順や、各反復で何をどのように改善するかを詳しく説明していない。また、Cogitoには直接回答する通常モードと、回答前に自己省察するモードがあるが、これは回答生成時の動作モードであり、モデル自身が運用中に重みや学習方法を継続的に変更することの証拠ではない。したがって、この語から人の関与が不要な自律的自己改変まで推定してはならない。
02 / IN PRACTICE
Self-Improving AIの活用例
Cogito v1-previewは、反復的自己改善を用いるIDAで学習されたモデルとして説明されている。利用時には、直接回答するモードと、回答前に自己省察するモードを選択できる。
03 / GOOD TO KNOW
使うときのポイント
「自己改善」という表現を見たら、学習時の戦略、回答時の自己省察、運用中のモデル更新を区別する。資料に更新対象や手順が示されていなければ、自律的な継続学習や自己書き換えを断定しない。
参考資料
deepcogito/cogito-v1-preview-llama-3B · Hugging Face (新しいタブで開きます)用語の説明や活用例に関連する参考資料です。
用語を知ったら、活用を知る。
AI LABで、AIの動向や業務に取り入れるヒントを読む。
