VPC環境で利用できます。
インデックスはメディアの分析結果を意味します。メディアアセットを分析してインデックスが作成されると、そのアセット内で人物、キーワード、発話者、スクリプトなどの情報を素早く検索できます。また、分析後に抽出されたメタデータが含まれた JSONファイルをダウンロードできます。
インデックス詳細情報画面
インデックス詳細情報画面の基本的な説明は、次の通りです。
動画アセットインデックスの詳細情報画面
| 項目 | 説明 |
|---|---|
| ① インデックスタイトル | インデックスと関連付けられた動画アセット(元の動画ファイル)の名前。情報アイコンをクリックすると詳細情報を照会 |
| ② ナビゲーション領域 | 分析されたシーンとキーワードを確認できる領域
|
| ③ 動画再生領域 | 動画を再生できる領域 |
| ④ シーンインサイト領域 | 選択されたシーン情報(シーンナンバー、持続時間)、インサイト、スクリプト、シーン要約を確認できる領域
|
| ⑤ [JSON] ボタン | 分析結果を JSONファイルでダウンロード |
| ⑥ タイムライン | 選択したシーンで検知された人物、キーワード、スクリプト情報がそれぞれのトラックに表示
|
画像アセットインデックスの詳細情報画面
| 項目 | 説明 |
|---|---|
| ① インデックスタイトル | インデックスと関連付けられた画像アセット(元の画像ファイル)の名前。情報アイコンをクリックすると詳細情報を照会 |
| ② ナビゲーション領域 | 分析されたキーワードを確認できる領域
|
| ③ インサイト領域 | インサイトを確認できる領域
|
| ④ [JSON] ボタン | 分析結果を JSONファイルでダウンロード |
インデックス詳細情報画面を照会する方法は、インデックス詳細情報照会をご参照ください。
インデックス詳細情報照会
インデックス詳細情報を照会する方法は、次の通りです。
- Media Intelligenceワークスペースにアクセスします。
- 分析が完了したメディアアセットをクリックした後、分析インデックスリストで分析結果領域の照会アイコンをクリックします。
- インデックス詳細情報ページが表示されたら、分析結果を確認します。
シーン選択
シーン選択機能を使用して、動画内で確認したい区間に簡単に移動できます。シーン選択方法は次の通りです。
- インデックス詳細情報ページを開きます。
- インデックス詳細情報照会を参照
- インデックス詳細情報画面でナビゲーション領域のシーンリストアイコンをクリックします。
- シーンリストメニューが表示されたら、確認したいシーンをクリックします。
- 選択したシーン区間がタイムラインに表示されます。
- シーンで検知された人物、キーワード、字幕情報を確認できます。
シーン選択機能は画像アセットの分析には提供されず、動画アセットの分析時にのみ利用できます。
キーワード検索
動画アセットキーワード検索
キーワードの検索機能を使用して、動画内で特定キーワードに関連する部分だけを素早く見つけ出すことができます。キーワード検索方法は次の通りです。
- インデックス詳細情報ページを開きます。
- インデックス詳細情報照会を参照
- インデックス詳細情報画面でナビゲーション領域のキーワード検索アイコンをクリックします。
- 検索フィルタ領域で2つのフィルタ機能を利用できます。
- 信頼レベル: キーワード結果の精度に点数を付けた後、「低」、「普通」、「高」に設定したレベル以上のみ表示されます。
- 結果検索範囲: 検索結果の範囲を調整して「幅広く」は様々な結果を、「正確に」はより絞って具体的な結果を提供します。
- 検索フィルタ下のキーワードカテゴリから当該動画で検知したキーワードが表示されます。
- キーワードメニューで必要なキーワードをクリックします。
- 複数のキーワードを選択して、同時に存在するシーンを検索できます。
- 検索キーワードは最大7つまで選択できます。
- 選択したキーワードが検知された部分がタイムラインに表示されます。
- デフォルトで提供するカテゴリ内に存在しない場合、「キーワードで動画検索」と「スクリプトで検索」オプションを使って検索結果をフィルタリングできます。
画像アセットキーワード検索
キーワードの検索機能を使用して、画像内で特定キーワードに関連する部分だけを素早く見つけ出すことができます。キーワード検索方法は次の通りです。
- インデックス詳細情報ページを開きます。
- インデックス詳細情報照会を参照
- インデックス詳細情報画面でナビゲーション領域のキーワード検索アイコンをクリックします。
- 検索フィルタ領域で2つのフィルタ機能を利用できます。
- 信頼レベル: キーワード結果の精度に点数を付けた後、「低」、「普通」、「高」に設定したレベル以上のみ表示されます。
- 結果検索範囲: 検索結果の範囲を調整して「幅広く」は様々な結果を、「正確に」はより絞って具体的な結果を提供します。
- 検索フィルタ下のキーワードカテゴリから当該画像で検知したキーワードが表示されます。
- キーワードメニューで必要なキーワードをクリックします。
- 選択したキーワードが右側のインサイトタブでハイライト表示されます。
- デフォルトで提供するカテゴリ内に存在しない場合、「キーワードで検索」オプションを使って検索結果をフィルタリングできます。
- キーワード検索結果に基づき、検索結果の有無をご案内するメッセージが表示されます。
インサイト照会
インサイト検索機能を活用することで、特定のシーンや画像から識別された人物情報とキーワードを確認できます。インサイトを照会する方法は、次の通りです。
動画アセットインサイト照会
動画アセットインサイトを照会する方法は、次の通りです。
- インデックス詳細情報ページを開きます。
- インデックス詳細情報照会を参照
- インデックス詳細情報画面でナビゲーション領域のシーンリストアイコンをクリックします。
- シーンリストメニューから確認したいシーンをクリックします。
- 画面右側の [インサイト] タブをクリックします。
- 動画内で検知された人物とキーワードが表示されます。
- 人物とキーワードをクリックして確認します。
- 人物とキーワード情報が検知された区間がタイムラインに表示されます。
画像アセットインサイト照会
画像アセットインサイトを照会する方法は、次の通りです。
- インデックス詳細情報ページを開きます。
- インデックス詳細情報照会を参照
- 画面右側の [インサイト] タブで、画像内で検知された人物とキーワード情報を確認します。
人物ラベリング
人物ラベリングを指定することで、人物検索の精度を高めることができます。インサイトパネル内の人物ラベリングを指定する方法は、次の通りです。
- インデックス詳細情報ページを開きます。
- インデックス詳細情報照会を参照
- インデックス詳細情報画面でナビゲーション領域のシーンリストアイコンをクリックします。
- 動画アセットの場合は、シーンリストメニューで確認したいシーンをクリックします。
- 画面右側の [インサイト] タブで、動画または画像内で検知された人物とキーワード情報を確認します。
- 人物領域で変更アイコンをクリックします。
- ラベリングする人物に似ている人物を自動的に検出します。
- 人物 DBをベースに選択した人物に似ている人物がいる場合、類似度と一緒に検出リストを提供します。
- 類似度が高い人物がいない場合、検出しません。
- 類似人物が提案された場合は、類似人物リストから該当する人物を選択し、 [確認] ボタンをクリックします。
- 変更確認画面で [確認] ボタンをクリックします。
- 変更適用範囲を設定した後、 [確認] ボタンをクリックします。
- 当該人物名とマッチする人物名、サムネイル情報にラベリングが交換されます。
- 人物新規追加ボタンをクリックすると、変更確認画面で変更内容と適用範囲を選択できます。
- 既に登録されている人物名の場合は追加できません。別名に変更した後にもう一度お試しください。
スクリプト照会
この機能は動画アセットに限り提供されます。
特定シーンで発話した音声を話者別に区分してテキストで表示した結果を確認できます。動画内のスクリプトを照会する方法は、次の通りです。
- インデックス詳細情報ページを開きます。
- インデックス詳細情報照会を参照
- インデックス詳細画面でナビゲーション領域のシーンリストアイコンをクリックします。
- シーンリストメニューから確認したいシーンをクリックします。
- 画面右側の [スクリプト] タブをクリックします。
- 動画で発話した音声の話者と区分してテキストとして提供します。
発話者変更
この機能は動画アセットに限り提供されます。
発話者名を変更することで、スクリプトの理解度を高めることができます。インサイトパネル内のスクリプト話者名を変更する方法は、次の通りです。
- インデックス詳細情報ページを開きます。
- インデックス詳細情報照会を参照
- インデックス詳細画面でナビゲーション領域のシーンリストアイコンをクリックします。
- シーンリストメニューから確認したいシーンをクリックします。
- 画面右側の [スクリプト] タブをクリックします。
- 動画で発話した音声の話者と区分してテキストとして提供します。
- スクリプト検索機能は提供しません。
- スクリプト領域で、発話者の変更が必要なセリフをクリックします。
- 発話者領域のドロップダウンアイコンをクリックします。
- 人物ラベリングリストが提供されます。
- 人物ラベリングリストで発話者を選択します。
- インデックス内で検知した結果とラベリングされた人物がいる場合、発話者を選択できます。
- インデックス内で検知した結果がないか、すべての結果が匿名の場合、スクリプトのみ変更できます。
- 変更確認画面で [確認] ボタンをクリックします。
- 変更適用範囲を選択できます。
セリフ変更
この機能は動画アセットに限り提供されます。
セリフ内容を変更することで、スクリプトの精度を高めることができます。インサイトパネル内のセリフ内容を変更する方法は、次の通りです。
- インデックス詳細情報ページを開きます。
- インデックス詳細情報照会を参照
- インデックス詳細画面でナビゲーション領域のシーンリストアイコンをクリックします。
- シーンリストメニューから確認したいシーンをクリックします。
- 画面右側の [スクリプト] タブをクリックします。
- 動画で発話した音声の話者と区分してテキストとして提供します。
- スクリプト検索機能は提供しません。
- スクリプト領域で、内容の変更が必要なセリフをクリックします。
- セリフ領域でテキストを変更します。
- セリフ領域で右側のチェックアイコンをクリックします。
シーン要約
この機能は動画アセットに限り提供されます。
シーン要約は VLMに基づく分析を活用し、動画の視覚情報およびセリフ/人物情報を統合した、文脈に基づくシーン要約を作成する機能です。コンテンツインデックスによって抽出されたメタデータを統合的に分析し、シーンごとの自然言語によるテキスト要約を提供します。
| 区分 | コンテンツインデックス | シーン要約 |
|---|---|---|
| 結果 | 構造化されたメタデータ(タグ) | 自然言語に基づく文脈情報(要約) |
| 検索方式 | キーワードの類似度マッチング | 意味に基づく文脈検索 |
シーン要約作成
シーン要約を作成する方法は、次の通りです。
- インデックス詳細情報ページを開きます。
- インデックス詳細情報照会を参照
- 画面右側の [シーン要約] タブをクリックします。
- シーン要約をまだ実行していない場合、機能の説明と [シーン要約を作成する] ボタンが表示されます。
- [シーン要約を作成する] ボタンをクリックします。
- シーン要約作成確認のポップアップが表示されたら、 [確認] ボタンをクリックします。
- [キャンセル] または [X] ボタンをクリックすると、シーン要約のトップ画面に戻ります。
- シーン要約の分析が開始され、右側パネルが分析進行中のステータスに切り替わります。
- インデックスの詳細照会画面の上部に「シーン要約の分析中にはメタデータを変更できません。」というご案内メッセージが表示されます。
- シーン要約の分析は非同期で処理されるため、分析が完了するまで他のタスクを行うことができます。
- シーン要約は、インデックス内のシーン(scene)を基準に分析が行われます。
- シーン要約の分析中には、人物ラベル変更やスクリプト編集など、メタデータの変更機能が一時的に制限されます。シーン要約が完了、失敗、またはキャンセルされると、変更機能は直ちに解除されます。
- 分析リクエストは、ワークスペース単位の共有キューで管理されます。既に処理中の分析が多い場合、既存のリクエストが完了した後、自動的に分析が開始されます。
シーン要約の結果確認
シーン要約が完了すると、右側パネルの [シーン要約] タブでシーンごとの要約情報を確認できます。
シーンの要約は、実行結果に応じて以下のように表示されます。
| 結果 | 説明 |
|---|---|
| 成功 | シーンごとの要約情報が右側の [シーン要約] タブに表示されます。最新の分析日時情報も併せて提供します。 |
| 失敗(キュー超過) | 「現在処理中の分析が多いため、すぐに実行できません。既存のリクエストが完了すると、自動的に分析が開始されます。」というメッセージが右側パネルの上部に表示されます。 |
| 失敗(エラー) | 「文脈分析に失敗しました。一時的なエラーのため、分析を完了できませんでした。」というメッセージが右側パネルの上部に表示され、下部にはトップ画面が表示されます。 |
| 他のインデックスの分析進行中 | 同じワークスペース内の別のインデックスでシーン要約が実行中の場合、そのインデックスの分析が進行中であることを示すメッセージが表示されます。 |
- シーン要約は実行1回につき、元の動画の長さに応じて課金されます。
- 分析失敗、またはユーザーが分析をキャンセルした場合は、課金されません。
シーン要約キャンセル
シーン要約の分析中にキャンセルする方法は、次の通りです。
- シーン要約の分析進行中の画面で、 [分析キャンセル] ボタンをクリックします。
- 分析キャンセル確認のポップアップが表示されたら、 [分析をキャンセル] ボタンをクリックします。
- [キャンセル] または [X] ボタンをクリックすると、シーン要約の進行中のステータスが保持されます。
- 分析がキャンセルされ、シーン要約のトップ画面に戻ります。
- 分析をキャンセルした場合は課金されません。
シーン要約変更
シーン要約に成功した場合、作成された要約内容を変更できます。シーン要約を変更する方法は、次の通りです。
- 画面右側の [シーン要約] タブで、シーン要約情報を確認します。
- 変更するシーンの [変更] ボタンをクリックします。
- 変更画面に切り替わります。
- シーン要約の内容を変更します。
- 変更が完了したら、保存します。
- ユーザーが変更した要約情報は別途保存されます。
シーン要約再分析
シーンの要約に成功した場合、再分析を実行できます。スクリプトや人物ラベルなどのメタデータが変更された場合、再分析を行うことで最新情報が反映されたシーン要約を作成できます。
シーン要約を再分析する方法は、次の通りです。
- 画面右側の [シーン要約] タブで [再分析] ボタンをクリックします。
- 再分析確認のポップアップが表示されたら、 [確認] ボタンをクリックします。
- シーン要約の分析が再開されます。
再分析の際、メタデータの変更有無に応じて以下のように処理されます。
| 区分 | 説明 |
|---|---|
| メタデータ変更なし | ユーザーが変更した要約情報がそのまま保持されます。 |
| メタデータ変更あり | 右側パネルの上部に、メタデータの変更に関するご案内メッセージが表示されます。再分析の際、ユーザーが変更した要約情報を参照してシーン要約を新たに作成します。 |
- メタデータ変更のご案内は、シーン要約の作成後に当該インデックスのメタ情報(スクリプト、人物ラベルなど)が変更された場合に表示されます。
- 再分析の際も、元の動画の長さに応じて同様に課金されます。
- 人物ラベリングやスクリプト変更などメタデータを変更した場合は、再分析を実行して最新情報をシーン要約に反映させることをお勧めします。
インデックス削除
インデックスを削除する方法は次の通りです。
- Media Intelligenceワークスペースにアクセスします。
- プロジェクト名をクリックします。
- 動画アセットをクリックした後、分析インデックスリストからインデックス IDをクリックします。
- インデックス情報ポップアップが表示されたら、 [インデックス削除] ボタンをクリックします。
- 削除されたインデックスは復元できません。
キーボードショートカットキー
ワークスペース内のキーボードショートカットキーを活用して、インデックスを素早く便利に確認することができます。キーボードショートカットキーの基本的な説明は、次の通りです。
| 動作領域 | ショートカット | 動作の説明 |
|---|---|---|
| 全体 | Spacebar | 再生/一時停止 |
| タイムライン | [ / ] | 前のシーン / 次のシーンに移動 |
| タイムライン | ← / → | 1秒前 / 1秒後に移動 |
| タイムライン | Shift + マウスクリック | マーカースナップ機能。各シーンの境界点到達時、マーカーを自動整列 |
画像アセットにはタイムラインバーは提供されず、タイムライン関連のショートカットキーは動画アセットでのみ使用可能です。