AI LAB / KEYWORD DICTIONARY

基礎知識

Nemotron 3 Diarization(Nemotron 3 Diarization)とは?

Nemotron 3 Diarizationは、音声から「誰がいつ話したか」を推定するNVIDIAのオープンウェイト話者ダイアライゼーションモデルです。

仕組みと使いどころ

最大8人の話者に対応し、録音済み音声とストリーミング音声の両方を処理できます。発話が重なる区間も扱い、各時点での話者の活動確率を出力し、開始時刻・終了時刻・匿名の話者ラベルへ変換できます。ただし、話者の実名や本人性を特定するモデルではなく、発話内容を文字にする音声認識モデルでもありません。話者付き文字起こしを作るには、別途ASRの結果と組み合わせる必要があります。長い音声は分割処理できますが、強い雑音、残響、遠距離収音、学習データと異なる音響条件などでは性能が低下する可能性があります。

Nemotron 3 Diarizationの活用例

たとえば、こんな場面で

会議や顧客通話、ポッドキャストの音声を処理し、ASRの文字起こしと話者ラベル、時刻情報を組み合わせることで、発言者別の記録や要約、担当者付きのアクション項目作成に活用できます。

使うときのポイント

入力は16kHzのモノラル音声が前提です。利用時は最大8人という制約を確認し、話者分離とASRの誤りを分けて、実際の音響環境に近いデータで検証してください。

参考資料

**Know Who Spoke When: Build Real-Time, Multi-Speaker AI with NVIDIA Nemotron 3 Diarization** (新しいタブで開きます)nvidia/Nemotron-3-Diarization · Hugging Face (新しいタブで開きます)

用語の説明や活用例に関連する参考資料です。

READ & LEARN

用語を知ったら、活用を知る。

AI LABで、AIの動向や業務に取り入れるヒントを読む。

記事一覧を見る