トップ   編集 差分 バックアップ 添付 複製 名前変更 リロード   新規 一覧 単語検索   ヘルプ   最終更新のRSS

ELANによる動画解析の手順 の変更点

Top / ELANによる動画解析の手順
#access
#analog

*ELAN (EUDICO Linguistic ANnotator) [#l109b5dd]

-目次
#contents

***ELANとは？ [#d571fee7]
-近年広く使われつつあるフリーの動画解析（アノテーション）ツールです。
-ELAN（エラン）は、動画と音声資源に注釈を作成するための専門的ツールである（[[ELAN Description:http://www.lat-mpi.eu/tools/elan/elan-description]]より）。
--無制限の数の注釈を加えることができる。
--注釈は相互接続な複数の階層で作成することができる。
--XMLフォーマットで保存される。
--メディア再生を既存のメディアフレームワークに委任する（多種多様な音声およびビデオフォーマットがサポートされる）
--Javaプログラミング言語で書かれ、ソースは非商業利用可能
--異なるステップサイズのメディア間を接続可能
--ユーザーが語彙を定義可能
--Praatに対応、TextGridファイルを読み込むことができる
-Max Planck Institute for Psycholinguistics（マックスプランク心理言語学研究所）開発

***参考 [#d9e32a27]
-[[ELAN:http://www.lat-mpi.eu/tools/elan/]]
--[[マニュアル:http://www.mpi.nl/corpus/manuals/manual-elan.pdf]]
-[[会話分析・ジェスチャー分析研究者のためのELAN即席入門（滋賀県立大 細馬先生）:http://www.12kai.com/elan/index.html]]
-[[エランの使用ガイド：手話分析用（山田裕紀先生）:http://www.j-dem.net/elan/elan-manual.pdf]]

**準備 [#a9cb057d]
***インストール [#td2ed4f5]
-[[Download ELAN:http://tla.mpi.nl/tools/tla-tools/elan/download/]] より、OSの種類にあったELANをダウンロードしてください。
-ダウンロードしたファイルをダブルクリックして、インストールを実行します。
--インストール設定の画面では、全てそのまま「next」を押します。
-インストールが終わったら、デスクトップのELANアイコンをダブルクリックして、実行します。
#ref(elan1.jpg)
-以下のような画面が表示されたら、インストール成功です。
#ref(elan2.jpg)

***解析ファイルの準備 [#gdca50a9]
-&color(red){以下は音声波形と動画を同期させたい場合のみ、行ってください。};
--音声波形と動画を同期させて表示したい場合、以下のフリーソフトウェアを使って、分析したい動画ファイルから音声ファイルを抽出します。

--AVI形式の動画ファイルからWAV形式の音声ファイルを抽出したい場合、[[AoA Audio Extractor:http://www.aoamedia.com/audioextractor.htm]] を使います。

--MPEG形式の動画などは「えこでこツール」を使ってもWAVにできます。
---[[http://sourceforge.jp/projects/ecodecotool/releases/:http://sourceforge.jp/projects/ecodecotool/releases/]] の「EcoDecoTooL114.zip」をクリックしてダウンロードしてください。
---動画ファイルをドラッグするだけで、自動的にWAVファイルが作られます。
#ref(ekodeko.jpg)

***起動 [#d58fc07c]
-ELANの初期画面から、「ファイル」→「新規作成」を選びます。
-下図のような画面が出るので、左のウインドウで分析対象の動画を選び、中央の「>>」ボタンを押します（右のウインドウに表示されます）。
#ref(elan3.jpg)
--音声波形を同期させたい場合は、続いて左のウインドウで音声ファイルを選び、中央の「>>」ボタンを押します。
--ファイルの選択が終わったら、右下の「OK」ボタンを押します。

-Initializing..という表示の後、以下のような画面が表示されます。
#ref(elan4.jpg)

**ラベルをつける [#p155ec19]
***注釈層に書き込む [#ka410675]
#ref(elan5.jpg)

***複数の注釈層を作る [#z63b64fc]
-ELANの上部のメニューから「注釈層」→「新規追加」を選びます。
-「注釈層の追加」ウインドウが開くので、「注釈層名」に適当な名前をつけて「追加」を選択します。
#ref(elan6.jpg)
--注意! 注釈層の名前に日本語をつけた場合、ラベル書き出し→再読み込みの際に文字化けするようです。
-新しい注釈層ができます。
#ref(elan7.jpg)
-上の層と同じ範囲を指定して新規層にラベルをつけたいときは、上の層をシングルクリック→範囲が選択されるので、新規層の選択された部分をダブルクリック
#ref(elan8.jpg)
-上の層とは異なる範囲を指定して新規層にラベルをつけたいときは、新規層のラベルをつけたい範囲を選択してダブルクリック
#ref(elan9.jpg)


***ユーザ定義ラベルの設定と呼び出し [#t6592dce]
-ユーザ定義ラベルを設定する
--決まったラベルをあらかじめ定義しておくには、ELANの上部のメニューから「編集」→「管理語の編集」を選びます。
--「管理語を編集する」ウインドウが開きます。
#ref(elan10.jpg)
--まずは「管理語名」と「管理語の説明」を入力して、横の「追加」ボタンを押します。
---すでにある管理語を編集した場合は、「変更」ボタンを押します。
--続いて「エントリの値」にラベルの名前を入力して、「エントリの説明」を入力して、
「追加」を押していきます。
--全てのラベルを追加したら、「閉じる」を押します。
--続いて、ELANの上部のメニューから「言語タイプ」→「新規言語タイプの追加」を選びます。
#ref(elan11.jpg)
--「管理」→「管理語を使う」の横の矢印をクリック→上で定義した管理語名を選択して「変更」→「閉じる」
--これで、ユーザ定義ラベルの中から選択してラベルをつけることができるようになります。
#ref(elan12.jpg)

-ユーザ定義ラベルを保存する
--ELANの上部のメニューから「ファイル」→「テンプレートとして保存」を選びます。
---ELANテンプレート形式（.etf）で保存されます。

-ユーザ定義ラベルを読み込む
--定義ラベルを読み込むには、ELANの上部のメニューから「編集」→「管理語の編集」→「読み込み」を選び、ELANテンプレート形式（.etf）のファイルを選択します。

***ラベルをテキストファイルで保存する [#v8c73fe6]
-以下のようなラベルを保存するとします。
#ref(elan13.jpg)

-タブ区切り文書ファイルで保存するには、ELANの上部のメニューから「ファイル」→「別ファイル形式で保存」→「タブ区切り文書ファイル形式で...」を選択してください。
#ref(elan21.jpg)
--「注釈層の選択」で、出力したい層にチェックを入れます。
--「次の時間を列に含める」「次の時間形式を含む」にチェックを入れて「OK」を押します。
---開始時間・終了時間、時:分:秒.ミリ秒 にチェックを入れておけば再読み込みも可能です。
--以下のような形式で出力されます。
#ref(elan_label_1.txt)

***テキストで保存したラベルを編集して再読み込み [#rc57b9cc]
-上で書き出された&ref(elan_label_1.txt);に新しい情報を追記して、再度ELANで読み込みたいとします。
-まず、elan_label_1.txt にはなぜか、1列目と2列目の間にタブ記号が二つ挿入されてしまっていて、このままではELANで読み込むことが出来ません。
--一度 Microsoft Excel などで elan_label_1.txt を読み込んで、空白列を削除します。
---Excel を起動 → 「ファイル」 → 「開く」 → 「ファイルを開く」のダイアログが出てくるので、「ファイルの種類」を「全てのファイル(*.*)」に変更して、elan_label_1.txt を指定
---ここで、ファイルが開けなかったときの対処法 → &ref(elan_error_excel.txt);
---「テキストファイル ウィザード」が開くので、「カンマやタブなどの区切り文字によってフィールドごとに区切られたデータ」を選択して「次へ」 → 「完了」
---Excel の画面が開くので、空白列を削除して「ファイル」→「上書き保存」
#ref(elan22.jpg)

-空白列を削除した elan_label_1.txt にデータを追記します。
--ここでは以下の二行を追記しました。
 1	00:00:03.900	00:00:04.710	ee
 1	00:00:04.890	00:00:05.850	oo
#ref(elan_label_2.txt)

-elan_label_2.txt をELANで読み込みます。
--ELANを開いて、「ファイル」→ 「読み込み」 → 「カンマ区切り/タブ区切りファイル」 → elan_label_2.txt を選んで「開く」
--空白列がない、データがずれていないなど、正しいフォーマットのファイルを指定していたら、以下のウインドウが開きます（フォーマットが間違っていたら何も起こりません）。
#ref(elan23.jpg)
---各列が何の情報なのかを選択してから、「OK」を押します。

-ELANに新しいラベルが読み込まれました。
#ref(elan24.jpg)
--elan_label_2.txt には動画ファイルの情報が含まれていないので、画面に動画が表示されていません。

-新しいラベル情報と動画をリンクさせます。
--上の状態のELANで、「ファイル」 → 「名前をつけて保存」
---.eaf 形式のテキストファイルが保存されます。
--保存された .eaf ファイルをテキストエディタで開きます。
---3行目と4行目の間に、以下の行を書き加えます。
 <MEDIA_DESCRIPTOR MEDIA_URL="file:///(動画ファイルの絶対パス)" MIME_TYPE="video/*" RELATIVE_MEDIA_URL="file:/(動画ファイルの相対パス)"/>
---動画ファイルを読み込んだ ELAN を .eaf 形式で保存して、その4行目をそのままコピー＆ペーストするのが確実です。
#ref(sample.eaf)

-再びELANを起動して、「ファイル」 → 「開く」 → 上で動画のパスを追記した .eafファイルを指定します。
--これで、追記したラベル情報と動画がリンクされます。


**検索 [#rfa40389]
***ラベルの一覧を表示する [#y0406717]
-ELAN画面右上の「格子」タブを選択します。
-「Empty」の右の矢印を選択して、一覧を出したい注釈層を選択します。
#ref(elan14.jpg)

***特定の文字列を含むラベルを検索する [#z97ddbb7]
-ELANの上部のメニューから「検索」→「検索(および置換)」を選び、「該当文字列」のところに検索したい文字を入れて「検索」を押します。

***特定のラベル連続を検索する [#x42ff9f0]
-default 層の検索語にa,b,cがあったとして、b,a,aの順でタグが時間的に並んでいる区間を検索したい場合
-ELAN上部の「検索」から、検索（および置換）を選んでください。
--「次の条件：」の「該当文字列」のところに b を入れて、「条件の追加」を押してください。
--下に続けてウインドウが出てきますので、「該当文字列」のところに a を入れて、「上で選択した注釈から次の注釈数以内：」のところに
「1 から 1」と入力して、「条件の追加」を押してください。
--同じように、下にウインドウが出てきますので、「該当文字列」のところに a を入れて、「上で選択した注釈から次の注釈数以内：」のところに
「1 から 1」と入力してください。
--左上の三角ボタン（実行ボタン）を押してください。
-これで、「b」「a」「a」の順に出現する「b」の開始位置が、検索結果として表示されます。

**動画再生 [#m9c53aa4]
***指定したラベルに対応する部分の動画を再生する [#n92d4850]
-指定したラベルの部分を選択して、「選択部分を再生」ボタンを押します。
#ref(elan15.jpg)

***再生速度を変える [#m872fe2a]
-ELAN右上の「再生調整」→「再生スピード」を変えます。

【注意】
-Windows Vista では動画と音声ファイルの相性によってうまくいかない場合があります。
--元動画をそのままスロー再生しようとしたら、音声が消える（無音の動画がスロー再生される）
---[[MMname2:http://page.freett.com/HarryTools/]]を使って元動画のフォーマットを調べたら、MPEG2/System-PS 、720x480（サイズ）、1800Kbps（色ビット数）、29.97fps（ビットレート）だった。
--FreeVideoConverterを使って((エクスプローラが落ち続ける場合あり、FreeVideoConverterをアンインストールして入れなおしたら直ったが、原因不明))動画をAVI形式に変換したら、うまくいく
---ただし、動画ファイルの容量が莫大になる(30GB)、再生には支障なし
--FreeVideoConverterを使って動画をwmv形式に変換したら、再生できるがスローにならない
--FreeVideoConverterを使って動画をmpeg1形式に変換したら、再生できない+フリーズ+CPU100%になる
--FreeVideoConverterを使って動画をmpeg2形式に変換したら、スローにしたとき音声が消える（動画はスローになる）

**表示 [#xa7abc5e]
***画像ファイルを出力する [#o95d5040]
-今表示されているELANの画面を画像ファイルにして出力するには、ELANの上部のメニューから「ファイル」→「別ファイル形式で保存」→「ELANのウインドウ画像...」を選択してください。
-選択した部分の動画と音声をフレームごとに出力するには、ELANの上部のメニューから「ファイル」→「別ファイル形式で保存」→「Filmstrip Image...」を選択してください。

***外部の数値データ系列をインポートして、時間軸に同期表示する [#bf55a84b]
-ELANヘルプ「USER'S GUIDE」>「ELAN documents」>「Screen display and navigation through a document」>「The Timeseries Viewer」を参照
-例として、ピッチ（基本周波数）データ(([[Praat/ピッチ（基本周波数）解析:http://speechresearch.fiw-web.net/41.html#udbb1c0c]]で解析した結果です))を記述したテキストファイルを読み込んで表示してみます。
-以下のようなカンマ（もしくは、タブ）区切りのテキストファイルを用意します。
--&ref(Pitch.csv);
---1列目はタイムスケール[秒]で、その行のデータの値が、動画開始後何秒の位置の値かを示したものです。
---2列目がピッチの値[Hz]です。
---サンプリング周波数やデータ数は音声データと一致していなくても問題ないです。

-動画を読み込んだELANの画面上で、「編集」>「リンクファイル」を選びます。
--「リンクされたファイル」ウインドウが開くので、「リンクされている二次的ファイル」>「追加」で上記のテキストファイルを選択し、「適用」を押します。

#ref(elan17.jpg)
-ELANの画面下に新しいパネルが現れるので、そこで右クリック >「トラックの環境設定」を選びます。
#ref(elan18.jpg)
--「トラックの環境設定」ウインドウが開くので、以下のように設定します。
---「時間の列番号」を1に
---「追加」タブの「トラック名」に任意のデータ名を入れる（ここでは「Pitch」）
---「追加」タブの「列」を2に
---「追加」タブの「(優先する)範囲」を「データから範囲を算出」に
#ref(elan19.jpg)
--以上の設定をして、「追加」を押し、「閉じる」を押します。
-データのグラフが同期されて表示されます。
#ref(elan20.jpg)

-もう一段データプロット層を作り、第一フォルマント（F1）と第二フォルマント（F2）を色分けして表示してみます。
--以下のようなカンマ（もしくは、タブ）区切りのテキストファイルを用意します(([[Praat/フォルマント解析:http://speechresearch.fiw-web.net/41.html#x669156c]] の結果です。))。
--&ref(Formant.csv);
---1列目はタイムスケール[秒]、2列目はフォルマントデータの数、3列目がF1[Hz]、4列目がB1[Hz]、5列目がF2[Hz]、...と続いていきます。

--「編集」→「リンクファイル」→「リンクされている二次的ファイル」→「追加」で、Formant.txt を選んで「適用」
#ref(elan26.jpg);

--ピッチデータがプロットされている層で右クリック→「トラックパネルを追加」を選びます。
#ref(elan25.jpg);

--ピッチデータの上段に、新しい層が追加されますので、そこで右クリックして「トラックの環境設定」を押します。
---「元データを選択して環境設定」のウインドウが出てくるので、Formant.csvを選んで「了解」
#ref(elan27.jpg);

--「トラックの環境設定」ウインドウが出てきます。
---「時間の列番号」は1に設定
---F1を設定するときは、「追加」タブの「トラック名」に「F1」、「列」に「3」、「(優先する)範囲」に「マニュアル設定」の最小値、最大値を適当な値に設定します。また、「トラックの色」を設定します。最後に「追加」ボタンを押します。
---F2を設定するときは、「追加」タブの「トラック名」に「F2」、「列」に「5」、「(優先する)範囲」は適当な最小値、最大値を設定します。「トラックの色」を設定して「追加」ボタンを押します。
#ref(elan28.png);
---「閉じる」を押してウインドウを閉じます。

--最後に、新しい層で右クリック→「トラックパネル」→「トラックの追加」で、F1とF2を順番に指定します。

--新しい層に、F1とF2が表示されました。
#ref(elan29.png);


***フレーム数を表示する [#e293ce48]

**バックアップ [#l56bd99c]
***自動バックアップの設定 [#r1496184]

**その他Tips [#v7c688c8]
***ソナグラム（スペクトログラム）は表示できますか？ [#r1b476a4]
-[[Spectrograms in ELAN or similar software?:http://www.lat-mpi.eu/tools/elan/elanforum/post200809268122208215]] によれば、''ELANでスペクトログラムを表示することはできません''。
-スペクトログラムを見ながらラベル付けをする必要がある場合は、[[音声解析ソフトウェア Praat:http://speechresearch.fiw-web.net/41.html]] でラベリング → Praat形式のラベルファイルをELANで読み込み、とするのが適当なようです。

***Dimensional plot tool for ELAN [#we05ca26]
-[[岡ノ谷情動情報プロジェクト The development project of a tool to visualize Information on a three-dimensional space:https://sites.google.com/site/dptool4elan/]]((有本様にお教えいただきました。ありがとうございました。))