本日 15 時まで，右からダウンロードできます。 日本音声学会「アジアにおけるコーパスを利用したデータ駆動型音声研究」特集号招待論文 日本語音声・テキストコーパス情報処理に 基づくオンライン韻律教育インフラの構築 Development of an online infrastructure for teaching Japanese prosody based on information processing of speech and text corpora (Private Edition) 峯松 信明 （東京大学大学院工学系研究科，教授） Nobuaki MINEMATSU (Professor, Graduate School of Engineering, The University of Tokyo) 英語要旨 This paper describes how speech and text corpora were used in developing OJAD (Online Japanese Accent Dictionary), an online Japanese prosody teaching/learning system. Current problems related to teaching Japanese prosody are summarized, and the relationship between these problems and system development is explained. A corpus of spoken verbs along with their conjugations was used to build a module to conduct verb accent search. A text corpus of sentences with both accentual phrase boundaries and accent nuclei labeled was used to train a boundary detector and an accent nucleus detector. These detectors were used to construct a prosodic reading tutor. Subjective assessment was done by 80 teachers of Japanese to both verb accent search module and prosodic reading tutor. All the teachers assessed the search module as “very effective” or “effective to some degree”. The reading tutor was evaluated by 73 teachers as “very effective” or “effective to some degree”. These results indicate high effectiveness of the two systems. Through the development of OJAD, the author has become aware that there are still gaps to be bridged in communication between Japanese teachers and speech engineers pertaining to the needs of the former and the technology being made available by the latter. These gaps are pointed out in the future directions. 日本語キーワード 日本語教育，音声・韻律教育，Online Japanese Accent Dictionary，音声合成技術，音声コーパス，テ キストコーパス，OJAD 講習会 1 はじめに 日本語学習者の数は年々増加の一途を辿っており，日本国際交流基金の最新の統計（交流基金 2013） によれば，総計約 400 万人となっている。外国語を学ぶ場合対象言語が何であれ，学習者は「相手が聞 き取りやすい発音を身に付けたい」と願う。国際語である英語の場合（Jenkins 2009），聞き手が母語 話者ではないことが多いため，必ずしも英語発音や米語発音が，聞き手にとって聞き取りやすいとは限 らない（Pinet 2010）。一方日本語の場合聞き手は殆ど日本人であり，より聞き取りやすい発音は自ず と「母語話者のような発音」と考えられる。また，海外の日本語学習者の多くはビジネスでの日本語利 用を考えており，public speaking 能力が要求される。周知のように日本人は，地方出身者であっても， 公の場では共通語（東京方言）を使って話す。日本語は方言性が単語アクセントに出現することが多く， その結果，音声指導，特に韻律指導を受けたいと願う学習者は少なくない（平野 2014）。しかしながら 現実問題として，音声教育・韻律教育に割く時間は限られている（轟木・山下 2009）。 本研究ではこのような教育事情を鑑み，日本語アクセント・イントネーションの教育・学習のための オンライン・インフラを構築した（峯松他 2013, OJAD 2015a）。まずアクセント教育に関しては，用 言の活用に伴うアクセント変形は比較的規則的であるため，教科書 16 冊から全ての用言を取り上げ，そ れらを活用させ（12 種類の基本活用），男女一名ずつの声優に読み上げさせた音声コーパス（発声数約 ８万）を構築した。そして教室における効果的活用を狙い，様々な目的に対応でき，容易に本コーパス を検索できるブラウザを開発した。 次にイントネーション教育に関しては，public speaking での授業を念頭に置き，学習者が作成した任 意の文章に対して，共通語として適切なイントネーションパターン，及び，アクセント結合後のアクセ ント核位置を視覚的に示し，その通りに読み上げる，韻律読み上げチュータを開発した。本システムの 開発には，アクセント結合によるアクセント核移動を高精度に自動予測する推定器が必要になる。そこ で，約六千の文セットに，アクセント句境界位置，アクセント核位置を付与したテキストコーパスを構 築し，これに対して機械学習を適用し，アクセント核位置推定器を構築した。 アクセント検索ブラウザ及び韻律読み上げチュータの二種類の機能に加えて，用言に接続される多種 多様な後続表現のアクセントを呈示する機能，任意の入力テキストから用言を自動抽出して基本活用の アクセントを呈示する機能を実装し，Online Japanese Accent Dictionary (OJAD) という名称で 2012 年 8 月より公開している（峯松他 2013, OJAD 2015a）。2015 年 4 月の時点で 11ヶ国語に翻訳され，初 級者でも利用可能な教育インフラとなっており，最近の半年間で（2014 年 11 月∼2015 年 4 月），約 16 万のアクセスを得ている。また，2012 年 11 月から 2015 年 4 月の間に，国内外の 63 都市で OJAD 講習 会を行なってきた（OJAD 2015b）。本論文ではまず，これらの講習会を通して筆者が学んだ日本語韻 律教育の諸側面・問題について整理する。次にそれらを踏まえた上で，OJAD 開発やその普及活動の様 子を述べる。なお，構築あるいは利用した個々の要素技術については既に峯松他（2013）で発表してい るので，本論文では，音声・テキストコーパスの構築・利用方法について詳説する。最後に，音声言語 技術・自然言語技術と日本語教育との接点について，OJAD の開発・普及を通して意識するようになっ た筆者の考えを述べる。 日本語韻律教育の諸側面とシステム開発指針 2 2.1 アクセント教育が有する諸側面 外国語を教える場合，その効率から文字言語（読み／書き）に基づく教示をすることが多く，発音に 十分な時間を割くことが難しくなる。日本語発音を指導する場合，従来，単音や特殊拍に焦点が当てら れ，韻律的側面は見落とされがちであった（轟木・山下 2009）。その結果，国内の大学で（生活用語と して）日本語を学ぶ場合，単語アクセントがピッチアクセントであることを知らない学生は，珍しくな い（阿・林 2010）。 一方，海外で日本語を学ぶ学生は，ビジネスでの利用を目的とすることが多い。周知のように，日本 人は公の場で話す場合，共通語（東京方言）を頻繁に使う。日本語は方言性がアクセントに出現しやす い事実を考えれば「共通語のアクセントを教えることは当然」と考えられるが，必ずしもそうなってい ない。中国で販売されている，声調言語である中国語を母語とする学習者向けの日本語教科書には，新 出語にアクセント核の位置が明記されている（平野 2014）。しかし日本国内で販売される教科書ではそ うなっていない。何故，このような状況が起こるのだろうか？筆者は日本語教育の専門家ではないが， OJAD 開発やその普及活動を通して認識するようになった，アクセント教育の様々な現状・問題につい て以下に列挙し，筆者の見解も示す。筆者の誤解に基づく記述があれば，是非とも指摘して戴きたい。 • 「アクセントは間違えても伝わる」 アクセントを間違えても意志疎通が妨げられることはあまりない。だから教える必要はない，と 考える教師は少なくない。その一方で，地方出身の日本人が公の場で話した場合に，アクセント の違いを指摘されると修正しようとする。時として母語話者でも求める情報を，学習者に提供で きない，しない状況は改善されるべきであると考える。 • 「東京方言話者ではないので，共通語アクセントを聞かれても困る」 日本語が母語であっても，東京方言話者でない教師にとって，共通語アクセントを教えることは， 外国語を教えることに相当し，それが難しい。「教師なら共通語アクセントを習得すべき」という 意見もあるだろう。しかし現実解は，東京方言話者でなくても（非母語話者教師であっても），ア クセントを教える，あるいは，学習者と共に学べる教育インフラを構築することであろう。 • 「単語アクセントは文脈によって変わるので教えにくい」 日本語の単語アクセントは文脈によって頻繁に変わる。およその傾向は示せても，詳細な規則化 は，教えるのも学ぶのも大変である。NHK アクセント辞典（NHK 1998）でも，基本的に孤立発 声の単語を対象としており，任意文脈におけるアクセントを把握するのは非常に煩雑である。アク セント教育インフラには，煩雑なアクセント変形を効率的に学べるインタフェースが必要である。 • 「日本語を母語とする教師だが，アクセントの High/Low の同定が難しい」 日本語を母語とする教師でも，聴取した文音声に対して，各モーラが High(H)/Low(L) のいずれ であるのかを聞き分けることが知覚的に難しい教師もいる。当然，流暢な日本語を話すが，H/L の制御はほぼ無意識的に行なわれるため，逆に，これを意識化するのが困難となる。教師に対し て知覚訓練を求めることも可能であるが，ここでも望まれるのは，モーラ単位での H/L 同定が難 しい教師でも使える，教育インフラの構築である。 • 「東京方言だけが日本語ではない」 「共通語アクセントを教えれば，東京方言こそが正しい日本語であるかのような誤解を与える」と 考え，アクセント教育を敬遠する教師は少なくない1 。しかし学習者は「どの方言が正しいのか」 を知りたいのではなく，例えば，ビジネスにおいて日本語で語る能力を習得したいだけである。ア クセント教育インフラ整備と同時に，教師側の意識も少なからず修正する必要があるだろう。 • 「そもそも韻律教育など受けていない」 非母語話者教師の中には，韻律教育を明示的に受けないまま，教師になった者も多い。この場合， 韻律教育として何を教えればよいのかに戸惑うことになる。そのような教師であっても，教える （と同時に共に学ぶ）ことができる教材が求められている。 以上は主として，教師の見地から考えたアクセント教育の諸側面であるが，学習者の立場から考える と，次のような側面を指摘することができる。 • 「先生よりピッチに敏感です」 声調言語を母語とする学習者は多く，この場合，母語において，音節を単位としたピッチ制御を行 なう。中国人の場合，個々の音節が何声なのかを意識的に把握する（シンボル化する）ことを小学 校で学ぶ。これは日本語で言えば国語の授業で単語内のどのモーラが H/L なのかを「おにぎり」 として常に意識付けることに相当する。このような国語教育改革が起これば「H/L の意識化や同 定が難しい」という問題は解決するだろうが，現状では，教師よりも学習者の方がピッチ制御に 敏感である場合もある。声調言語を母語とする学習者は，各モーラが何声なのかを意識しながら 日本語を聞いている。彼らはアクセントを知りたがるが，教育インフラが整っていない。 • 「スピーチ・コンテストではアクセントが出来た方が，発音が上手だと言われる」 アクセントについて教えない教育現場が多い一方で，スピーチ・コンテストではアクセントを間 違える話者より，間違えない話者を「発音が上手」と評価する。筆者の知る限り「アクセントの間 違いは無視して評価します」と明言しているコンテストはない。 様々な観点からアクセント教育の諸側面を概観した。筆者は，アクセント教育が必要か不必要かは， 最終的には，学習者が判断すべきことであると考える。教師がすべきことは，アクセント習得のコスト と実益とのバランスを，各学習者が置かれた文脈においてアドバイスすることであろう。しかしながら， アクセント学習を勧められた場合であっても， 「任意の文章を共通語として適切なアクセントで読む」た めの教育インフラが提供されなければ，その学習者は，必ず路頭に迷うことになる。 2.2 イントネーション教育が有する諸側面 単語アクセントは，既に指摘したように「間違えても伝わる」ものであり，ビジネス目的ではなく，生 活言語として日本語を学びたい場合は，学ぶ必要はないのかもしれない。しかし，イントネーションはそ れとは異なる。例えば，中国人初級者は各モーラに四声を付与する傾向があり，また，単語や文節単位 での発声となる傾向がある。その結果，文イントネーションに必要以上に起伏が生じたり（平野他 2009） 1 日本の単語アクセントに関する知識の蓄積は，各地・各時代の日本語を研究対象とした方言学者によって行なわれてきた 経緯があり，ある特定の地域・時代の方言だけを優先的に扱うことに対する抵抗感があるのかもしれない，と教えて戴いたこ ともある。 ，不要なポーズが挿入されやすい2 。これに対して，適切なイントネーション指導やポーズ指導を受けた 後の学習者の音声サンプルを聞くと， （母語話者にとっての） 「聞き取りやすさ」が格段に向上することに 驚かされる（中川・許・中村 2009）3 。逆に言えば，適切な制御を学ばないと「聞き取りにくい日本語」 となってしまう。仕事で使う場合は当然であるが，生活言語として日本語を学ぶ場合も，これは必須の 学習項目であろう。教師を対象とした音声指導の講習会においても，聞き取りやすい発声を短期間で定 着させる指導法として，イントネーションに基づく指導法が提唱されている（笈川 2014, 磯村 2014）。 またイントネーションは単語アクセントとは異なり，発話意図と密接に関係する。そのため，不適切 なイントネーション制御が行なわれると，聞き取りにくくなるだけでなく，例えば，無礼な日本語，生 意気な日本語として母語話者が受け止める場合がある。当然，学習者本人にはそのような意図は全くな い。よく耳にする例としては「バイト先の上司に嫌われた」という事例である。 このように聞き取りやすい，かつ，意図が誤解されない発声とするためにイントネーション教育は不 可欠であるが，イントネーションもアクセントもいずれもピッチ制御であるため，両者を同時に教育す る場合，学習者のレベルに応じた工夫も必要である。中川・許・中村（2009）では，図 1 に示すように， 1) 文の意味を考えてフレーズ境界を定め，2) 境界のみにポーズを置き，3) 各フレーズを「へ」の字を描 くようなイントネーションにする，という指導を行なっている。より自然な日本語にするためには，ア クセント（核）の付与が必要である。しかし，全ての単語（アクセント句）にアクセント付与を求める ことは，学習者のレベルによっては負担が大きい。実践的な折衷案として，中川・許・中村（2009）で は「フレーズに最初に現れるアクセント核のみに注意を払い，その後の核は無視してよい」という指導 戦略で臨んでいる。これは，アクセント句長をできるだけ長くし（イントネーション句を一つのアクセ ント句として発声し），核数を減らす戦略である。 2.3 どのようなアクセント・イントネーション教育インフラが必要なのか？ 日本語の初級教科書では漢字に読み（平仮名）が振られているが，第 2.1 節，第 2.2 節で指摘した問題 を一言で言えば， 「平仮名列化された日本語文は，まだ読みになっていない。それを適切に音声化するに は，多くの不可欠な情報が欠落している」という指摘となる。平仮名化してあれば「読める」と感覚す るとすれば，それは母語話者故の勘違いであり，例えば，1) どの母音が無声化するのか，2)「えい」は いつ「えー」となり，いつ「えい」となるのか，3)「らりるれろ」の子音部分の音声は，どの音として 実現すべきか，4) イントネーションはどのようなパターンになるのか，5) 文中のどのモーラがアクセン ト核になるのか，など，テキストの裏に隠れた情報が，一切，明示化されていない。この隠れた情報を， 無意識的に制御して読んでしまうのが母語話者であり，逆に彼らは「何を無意識的に制御しているのか」 を意識化するのに困難を覚える。一方学習者は，この情報を意識的に学ぼうとし，それらの制御を無意 識的に行なえるよう，反復練習する。しかし，隠された情報が明示的に示されず，それを推測すること を学習者に強いる環境にあるとすれば，それは単に，教育インフラの欠如である。 さて音声合成研究者は，上記の問題は既に，およそ解決済みの問題として認識しているはずである。 漢字仮名混じり文を平仮名化し，それに対して，様々な情報を自動推定して付与し，最終的に音声波形 化するのがテキスト音声合成だからである。「平仮名化されたテキストを音声化する際に，必要な情報 を自動的に付加する」技術は，テキスト音声合成の前処理として，長年の蓄積がある。例えば，ある漢 2 ポーズ挿入は，学習者の母語には非依存であろう。 訓練前後の学習者音声は，中川・許・中村（2009）の付録 CD で確認できる。なお，OJAD を国際会議 INTERSPEECH2013 のデモセッションに展示した際に，学会側から要請されてビデオクリップ（OJAD 2015c）を作成したが，上記サンプル音声 を用いている。URL を参考文献欄に示しているので，そちらで確認できる。実際には約 15 分の自習による効果である。 3 字仮名混じり文を JEITA (Japan Electronics and Information Technology Industries Association) が 規定する IT-4006（JEITA2010）に基づいて変換した例を図 2 に示す。アクセント句境界位置，アクセ ント核位置，母音無声化，母音長音化，ポーズ位置などが明示的にシンボルとして表示されている（各 記号の意味は表を参照）4 。音声合成の前処理であるテキスト解析部を用いれば，任意の漢字仮名交じり 文を JEITA フォーマットに変換できる。これを理解しやすいインタフェースを通して視覚的に呈示し， 更には合成音声を（聴覚的に）提示すれば「平仮名列で書かれた日本語文は，まだ読みになっていない」 という問題の多くは解決するはずである。 ここで，計算機に日本語を読み上げる能力を授ける日本語音声合成研究を，日本語教育の観点から考 察してみる。日本語を母語としない人間に対して，日本語の「読・書・話・聞」能力を授けるのが日本語 教育であり， 「話」の一部は発音教育となる。一方，機械に「話」能力（特に読み上げる能力）を授ける 試みが音声合成研究である。前者の場合，発音に多少の難があっても「外国人だから」と許してもらえ るのだろうが，例えば後者の場合アクセントが頻繁に間違えば「お宅の合成器，訛ってますよ」と買っ てもらえない。日本語発音教育は， 「母語話者のように喋る外国人」を育てることを目的とはしていない と考えるが，日本語音声合成研究は「母語話者のように喋る機械」を育てないと収益に繋がらない。そ の意味で日本語音声合成研究は，非常にシビアなスパルタ式日本語発音教育であると言える。 単語を指定してアクセントを検索するシステムの開発 3 3.1 用言を単位とした音声コーパスの構築 用言の活用におけるアクセントの文脈依存性（アクセント結合）は，比較的規則的であるため，まず， 任意の用言（動詞，い形容詞，な形容詞）をクエリとし，基本活用（12 種類）に伴うアクセント変形を 呈示する検索システムを構築した。代表的な教科書を 16 種類選定し，出現する全ての用言を，その教科 書で初めて出現する課情報とともに抽出し，各用言に読みを振り，基本活用時のアクセント型を求めた。 対象となった用言は約 3,500 種類であり，約 42,000 の活用に対してアクセントを振ることになるが，実 際には以下の作業を通してアクセントを求めた。まず，活用後の用言（「歩いて」など）をアクセント句 一つと解釈し，アクセント核位置を自動推定した（鈴木他 2013, 橋本・峯松・廣瀬 2014）。当然誤りが 含まれるため，全ての推定結果を検査する web システムを構築し，日本語教師三名に合計三回検査させ た。なお，アクセント自動推定器は仕様として一通りのアクセント型しか出力しないが，アクセントに は揺れが存在する。揺れが許容される場合は，許容されるアクセント型を日本語教師に併記させた。最 終的な呈示情報に誤りが含まれないよう，細心の注意を払った。 次に，全ての項目を男女二名の声優に遮音室で読み上げさせ，収録した。まず声優・ナレータープロダ クションに「日本語教育，特にアクセント教育のモデル発声ができる話者」を複数選定させた。男女合 わせて五名が選定され，日本語教師三名による主観的な判断により，最終的に男女一名ずつを選定した。 彼らに約 42,000 全ての（活用後の）用言を発声させた。収録の際，12 活用/用言を発声・収録単位とし て手動でファイル化し，これに対して，音声パワーに基づく音声区間検出を行ない，用言頭，用言尾を 自動検出し，前後に 200msec のポーズを付けて各用言発声を切り出した。各発声は一度ヘッドホン聴取 し，切り出し誤りは手動で修正した。以上のようにして，大規模な用言活用音声コーパスを構築した。 4 JEITA フォーマットでは音声記号は使われていないが，音声合成システムでは通常，片仮名で記された各モーラの子音， 母音の音素は，前後の音素文脈，アクセント文脈，イントネーション文脈などに依存して定義されている（コンテキスト依存 の音素定義）。その結果各音素は，数十から数百の音テンプレートとして，システム内の音素片（波形素片やスペクトル素片） データベースに保持されている。音声学的に解釈すれば，一つの音素の異音が数十から数百用意されていることに相当する。 各用言に対して，二種類の難易度ラベルを付与した。一つは旧日本語能力試験に基づく難易度表を用 いたものであり，他方は砂川（2015）で開発されている難易度表を使ったものである。これらは「初級 で学ぶ基本的な用言を対象として」単語アクセントを呈示する，などの利用が想定されるからである。 3.2 用言を単位としたアクセント検索システムの構築 上記コーパスを用いて，用言活用に伴うアクセント情報を，用言をクエリとして検索する web システ ムを構築した。データベース検索には MySQL v5.1.63 を，web 構築には CakePHP v2.1.3 を使用した。 図 3 に検索・表示条件を示す。検索対象とする用言は個別指定もできるが（「単語の検索」窓に入力）， 用言の属性を用い，様々な条件で検索できるようにした。属性としては 1) 教科書とその課，2) 品詞，3) （孤立発声時の）アクセント型，3)（孤立発声時の）単語長，4) 二種類の難易度である。また，項目群 の表示順序についても様々な条件で表示できるようにした。アクセント型（平板，頭高，中高，尾高）， アクセント核位置，単語長，難易度，五十音順のいずれを優先して表示するのかを変更できる。更には オプションとして，アクセントの揺れ表示，ピッチパターンの視覚表示の ON/OFF も指定できる。自 由度の高い検索及び表示が可能となっている。例えば， 『みんなの日本語』の 18∼19 課に出てくる動詞 を全て取り上げるが， 「なかった形」「ば形」「使役形」「受身形」「命令形」「可能形」「う形」は未習なの で見せない。また，活用の順番は「ます形」「辞書形」「て形」「た形」「ない形」の順に並べ，視覚的理 解を助けるようピッチパターンも併記する，といったことが容易に可能である。図 4 にその結果を示す。 PC やタブレット画面上ではカラーで表示されるが，教室で配布資料とする場合は，グレースケールの 方が都合が良い場合も多い。印刷用画面として図 4 をグレースケール化した画面も別途用意している。 音声再生は，個々の項目単位，活用形単位（ある活用形の（そのページ内の）全用言，縦読み），用言 単位（ある用言の全活用形，横読み）で再生させるなど（図 4 参照），種々の再生モードを用意し，便 宜を図った。これら音声ファイル（MP3）はダウンロードもできる。 3.3 システムの評価 世界中の日本語教師に協力を呼びかけ，計 80 名の日本語教師（約 2/3 が海外在住の日本語教師である） を対象とし，本システムの使用方法を説明した上で，アンケート調査を行なった。既に（峯松他 2013） で発表したデータであるが，その一部を表 2 に示す。なお，80 名の教師が教える学習者の母語分布は 表 1 の通りである。韻律教育は日本語教育全体の中の一部門であることを考えると，本システムの実用 性は十分に認めてもらえたものと考えている。 任意のテキストに対してイントネーション・アクセントを自動付与して読 4 み上げるシステムの開発 4.1 コーパスの構築とそれを用いたアクセント核位置推定 テキスト音声合成を目的とした文中のアクセント核位置の推定は，各種単語属性，音韻属性を用いて 規則により推定する手法が古くから知られている（匂坂・佐藤 1983）。しかし，規則による推定は例外 処理を多く含むこととなり，規則の管理が煩雑になる。アクセント核位置推定の目的が，アクセント結 合のメカニズムの解明や理論化ではなく，与えられたテキスト中のアクセント核位置を特定することだ けであれば，アクセント核位置がラベル付けされたテキストコーパスと，各単語の孤立発声時のアクセ にほんごのべんきょうは / むずかしいですが / だいすきです （あ はアクセント核） 図 1: フレージングとポージングに基づく韻律指導 2006 年の調査によると，日本全国で，約 33%の家庭がペットを買っているそうです。 ニセ’ ン/ロク’ ネンノ/チョ’ ーサニヨルト ニホンゼ’ ンコクデ ヤ’ ク%/サ’ ンジュー/ サンパーセ’ ントノ/カテーガ/ペ’ットオカッ. テイルソ’ ーデス%. グッズの専門店もでき，お洒落な服を着た犬も，よく見かけます。 グ’ッズノ/センモ’ ンテンモ/デ’ キ オシャ’ レナ/フ%ク’ オ/キ%タイヌモ ヨ’ ク/ミカケマ’ ス%. ’:アクセント核，/:アクセント句境界， :ポーズ，%:母音の無声化 図 2: 漢字仮名混じり文から JEITA フォーマットへの変換例 図 3: 検索・表示条件 図 4: 単語検索結果の例 ント型を用い，適切な機械学習アルゴリズムを使うことで，核位置推定器は構成できる5 。筆者は鈴木他 （2013），橋本・峯松・廣瀬（2014）において，大規模コーパスと CRF (Conditional Random Fields) を 用いたアクセント句境界推定器，及び，アクセント核位置推定器を構築している。以下，構築したコー パスについて説明する（黒岩他 2007）。 新聞記事読み上げ音声コーパス（Japanese News Article Sentences, JNAS）（音声資源 2015） で使 用されている文を用いた。これらは新聞記事，及び音素バランス文である。この文集合に対し，自然な 話速で読み上げた場合のアクセント句境界とアクセント核をラベリングする訳だが，アクセント感覚に は個人差があるため，特定の一人のラベラーに全作業を依頼した。また，このラベラーの作業結果を検 査する検査者も一人選定した。東京生まれ・育ちであり，合唱部に所属する比較的音感の鋭い大学生 6 名 に対して，日本語アクセントに対する教育を施した上で，アクセントに関する試験を行って選抜し，最 終的にラベラ 1 名，検査者 1 名を選定した。 アクセント句境界及びアクセント核の定義は以下の通りである。 アクセント句境界 約 7 モーラ/秒で読んだ場合を想定し，ピッチの句頭上昇が見られる箇所をアクセン ト句境界とする。休止が入った場合も，通常は境界が生じる。 アクセント核 アクセント句内で，ピッチが急激に下降する直前のモーラ。意識的に当該箇所のみで急 激にピッチを下げ，それ以外では下降がないように読んだ場合に違和感を感じなければ，その下降箇所 をアクセント核とした。なお，副次核を認めている。副次核を用いてアクセント句内に複数の核を付け るべきか，あるいは，複数のアクセント句に分けるべきかを判断する基準としては，句頭の音高上昇が あるべきか否かを用いた。ただし，一形態素の中には，アクセント核は高々一つであるとした。 最終的にラベリング及び検査が終了した文は 6,334 文である。機械学習を適用する場合，これらの文集 合に対して形態素解析を行う必要がある。解析後，一部の誤りは手修正を行い，最終的に，6,109 文を用い て，アクセント句境界位置推定，及び，アクセント核位置推定を検討した。技術的な詳細は鈴木他（2013）， 橋本・峯松・廣瀬（2014）に譲るが，形態素解析結果より様々な素性を導出し，CRF(CRF++v0.57) に よる識別モデルを用いて，二種類の推定器を構築した。評価実験の結果，形態素解析誤りを除外した文 セットに対し，句境界推定では F 値 94.1%であり，アクセント句内のアクセント核位置推定では F 値 96.7%であった。なおこのコーパスは，アクセント結合予測モジュールと共に，TASET (Tokyo Accent Sandhi Estimation Toolkit) （鈴木・峯松 2013）という名称で公開している。 4.2 アクセント結合予測における二種類のモードとその実装 第 3 節で構築したシステムは対象を用言に限定しており，これだけでは，文を適切に読み上げること はできない。アクセントの問題は用言だけではないからである。文中アクセントの問題は，アクセント 句境界位置推定モジュール，アクセント核位置推定モジュールを利用することで解決できるが，日本語 教育という応用場面を考えると，第 2.2 節で示した事情を考慮する必要がある。もちろん，文を対象と しているため，アクセント以外にイントネーションも適切に情報呈示する必要がある。 結局，任意テキストに対してイントネーション・アクセントを自動付与して読み上げるシステムが必 要となるが，本研究では，少ない訓練で効果的に「発声の分かりやすさ」を向上させる，フレージング ＆ポージングに基づく発声訓練法（中川・許・中村 2009）に準拠してシステム設計した。中川・許・中 村（2009）におけるフレーズは，およそ， 「意味の区切り，呼気の区切りなどによって形成される一息で発 5 なお実際の運用に際しては，幾つかの例外処理を規則処理として導入している。 声される単語系列」と定義できる。本システムでは，このフレーズ区切り（記号 “/”）位置はユーザーが ˙要 ˙な ˙個 ˙ 数， ˙ 与えるものとし，これらが振られたテキストに対して，各フレーズ内のアクセント核位置を必 ˙要 ˙な ˙箇 ˙ 所に呈示する，という方針をとった。なお，文中に含まれる句読点（及びそれに準ずる記号） ˙ 必 及び改行は，自動的にフレーズ区切りと解釈した。 フレーズを単位として形態素解析を行ない，アクセント句境界検出を行なうと，通常，フレーズは複数 個のアクセント句として解析される。つまりフレーズの中には，アクセント句頭の L→H というピッチ上 昇，及び，アクセント核による H→L というピッチ下降が複数個，系列として観測されることになる。し かし，これら局所的なピッチ制御をフレーズ中で何度も初級学習者に強いるのは負担が大きい。そこで上 級者モードと初級者モードの二種類のモードを用意することとした。上級者モードでは全てのアクセン ト句をそのまま表示し，初級者モードではアクセント句を繋げ，フレーズ全体を一つのアクセント句とし て表示することとした。但し，頭高型アクセントに対する知覚的敏感性（Minematsu and Hirose 1995） を考慮し，3 モーラ以上の頭高型アクセント句に関しては，初級者モードでも残すこととした。 図 5 に「日本の漫画は面白いし，アニメも大好きです。」と入力した場合の処理を示している。形態素 解析，アクセント句境界推定，アクセント核位置推定が行なわれ，上級者には，これらの結果に従って ピッチパターンが視覚的に表示される。初級者用の表示は，上級者用の複数のアクセント句を以下の接 続規則を使って一つにまとめあげる。二つのアクセント句 A，B を接続する場合，(A,B)=(有核, 有核)， (有核, 無核)，(無核, 有核)，(無核, 無核) の四種類のパターンのいずれかとなる。A が有核の場合，アク セント核による H→L の後はそのまま L を続けさせ，B の各モーラは全て L となる。A が無核の場合， B の先頭モーラは H となり，B が有核であればそこで H→L となってその後は L が続く。A, B 共に無核 であれば，B は先頭モーラ以降全てのモーラは H となる。図 6 に実際の出力の様子を示す。初級者モー ドの場合，局所的なピッチ変動が抑制されている。詳細な説明は省くが，形態素解析結果より得られる 読みの情報から，無声化すべきモーラを規則により求めている。図中の網かけ部がそれに相当する。 ピッチパターンの描画に関しては，音声分析・合成の分野で実績のある基本周波数（ピッチ）パター ン生成過程モデル（藤崎・須藤 1971）を用いた。推定されたアクセント核位置を本モデルのパラメータ 値に翻訳し，それらを用いて滑らかなピッチパターンを描画している。このモデルでは，ピッチパター ンをフレーズ成分（大局的な変化パターン）とアクセント成分（アクセントに伴う局所的な変化パター ン）の足し合わせとして捉え，両成分を少数のパラメータで制御する。アクセント成分に対応する制御 パラメータは，アクセント核位置と対応がとれるため都合が良い。実際の音声波形では，無声区間には 周期構造が見られないため，そこには基本周波数は存在しない。しかし本モデルでは無声区間にも滑ら かなピッチパターンを描画できるので，教育的に，非常に都合が良い。最終的に教師のイメージに沿っ たパターンニングとなるよう，教師と協議しつつ各種パラメータの値を設定した。即ち本システムにお けるピッチパターンとは，実際の音声に物理的に観測される基本周波数値列を意味するのではなく，教 師が学習者に示したいピッチパターンイメージを意図している。 4.3 読み上げ機能の実装 第 4.1 節，第 4.2 節で構築したモジュールを用いると，フレーズ区切り（記号 “/”）が付与された任意 テキストに対して，1) イントネーション句境界，2) アクセント句境界，3) アクセント核位置，4) 無声 化モーラなど，様々な付加情報を付与し，最終的に，JEITA フォーマットに変換できる。具体的な例は 図 2 に示した通りである。OJAD では，これを（株）KDDI 研究所が提供する音声合成ソフトウェア N2 （KDDI 2015）に入力することで，音声波形を得ている。2015 年 4 月現在，N2 は男性話者五名，女性話 表 1: 学習者の母語分布（%） 北京語 21.7 フランス語 英語 11.1 ドイツ語 広東語 9.6 台湾語 スペイン語 8.6 タイ語 ベトナム語 8.1 ポルトガル語 様々 7.6 オランダ語 韓国語 7.6 イタリア語 ロシア語 5.6 その他 4.5 4.5 3.5 2.0 1.0 0.5 0.5 3.5 表 2: 単語検索システムに対する教師の評価（%） a) 学習者に役立つと思いますか？ b) 授業で使いますか？ 非常に役立つ 71.0 是非使いたい 38.7 少し役立つ 29.0 必要があれば使いたい 59.7 あまり役立たない 0.0 自分の授業には必要ない 1.6 全く役立たない 0.0 「日本の漫画は面白いし，アニメも大好きです。」 形態素解析 アクセント句境界推定 アクセント核位置推定 にほんの まんがは おもしろいし あにめも だいすきです アクセント句接続規則 ＬＨＨＨ ＬＨＨＨ ＬＨＨＨＬＬ ＨＬＬＬ ＨＬＬＬＬＬ （上級者用モーラ別Ｈ／Ｌ値） ＬＨＨＨ ＨＨＨＨ ＨＨＨＨＬＬ ＨＬＬＬ ＨＬＬＬＬＬ （初級者用モーラ別Ｈ／Ｌ値） 基本周波数パターン生成過程モデル 基本周波数パターン生成過程モデル 上級者用ピッチパターン 初級者用ピッチパターン 図 5: 上級者用（左） ・初級者用（右）のピッチパターン生成方法 図 6: 視覚呈示された上級者用（上） ・初級者用（下）ピッチパターン例（グレーの曲線はフレーズ成分） 者五名を提供しているが，その中から日本語音声教育に利用しうる品質を有する男女二名ずつを採択し た。なお，ピッチパターン表示は，JEITA 化されたテキストと基本周波数パターン生成過程モデルを用 いて描画しているため，図 6 のようなピッチパターンが，どの話者でも共通に表示される。しかし各話 者は話者固有の発声の癖を有するため，合成音声に観測される実際の基本周波数値列は，話者によって 若干異なる。話速に関しては，Fast, Normal, Slow の三種類のモードを用意しており，各モードにおけ る発声モーラ数／秒は，話者によって変わらないよう，制御している。 4.4 システムの評価 第 3.3 節同様，計 80 名の日本語教師に，本システムの使用方法を説明した上でアンケート調査を行 なった。既に（峯松他 2013）で発表したデータであるが，その一部を表 3 に示す。なおこの評価は，読 み上げ（音声合成）機能を OJAD に実装する前に行なった調査である。Public speaking の授業では，学 習者は原稿を用意し，それを読む形で練習する。この時，正しいアクセントで読みたい学習者は，アク セント感覚に優れた母語話者教師を探してアクセント位置を書き込んでもらう。そのような教師がいな い環境では，正しいアクセント（即ち共通語）で原稿を読むことは極めて難しい。こういう現状を鑑み 本調査は，任意テキストを対象とした，イントネーション・アクセントパターン視覚呈示システムの評 価として行なわれた。なお音声合成機能そのものは，各社が web で無償提供している「テキスト音声変 換機能」を紹介しており，OJAD 以外の web を用いることで，テキストの音声化は可能な状況での調 査となっている。 表 3 より，本システムの実用性は十分に認めてもらえたものと考えているが，第 3.3 節と異なり，学 習者に「あまり役立たない」と答えている教師も 8.5%いる。自由記述欄を見ると，1) 呈示されたパター ンに従った音声出力機能，2) 学習者音声の採点・評価機能，を要望する意見が見受けられた。前者につ いては既に解決済みであるが，学習者音声の韻律評価モジュールの開発は今後の課題となっている。な お，後者を要望する教師からは， 「呈示されたパターン通りに学習者が発声できているかどうか，教師自 身が適切に指摘できるかどうかが不明」との意見が寄せられていた。 システムの運用と OJAD 講習会 5 5.1 システムの運用実績 OJAD は 2012 年 8 月より一般公開しており，現在下記の四機能がある。本論文では第一及び第四の 機能について主に論じている。 • 代表的な教科書を対象に，用言の基本活用時のアクセント（変形）や名詞のアクセントを検索で きる。用言に関しては全活用の音声が聴取可能。 • 基本活用以外の様々な動詞の後続語表現に対して，そのアクセントを検索できる。 • 任意テキスト（漢字仮名混じり文）から用言を自動抽出し，抽出された用言に対して，基本活用時 のアクセント変形の様子を視覚的に呈示。 • 任意テキストに対して，適切なアクセント，イントネーション，更には無声化モーラを視覚表示し て，その通りに読み上げる。 2012 年 8 月の公開より Google Analytics を使ったアクセス解析を行っているが，2015 年 4 月現在，総 計，約 38 万のアクセスを得ている。アクセスは単調増加の傾向を示しており，この半年で約 16 万に達 している。図 7 に公開後の週単位でのアクセス数を示す。約半数が海外からのアクセスだが，台湾，中 国，タイなど，声調言語を母語とする地域からが特に多い。既に日本語以外に 11ヶ国語に翻訳され，初 学者でも利用可能になっている。利用者から様々なフィードバックを得ている。例えば，10 年の日本語 学習歴を有する北米の日本語学習者（うち 4 年は北米の大学での日本語学習，それ以外に 2 年間日本で 勤務）から， 「橋／端，雨／飴などピッチにより区別される単語が幾つかあることは知ってますが，全て の単語に固有のピッチアクセントがあることを初めて知りました。何故自分の発声が母語話者と違うの か，母語訛りの謎が一つ解けました。」という連絡を受けた。筆者は日本語教育を専門とする者ではない ため，この学習者が置かれた環境がどの程度一般的なものかは分からないが，情報インフラの欠如に起 因する一つの実例として，受け止めている。 5.2 OJAD 講習会 2012 年 11 月より，3∼4 時間に渡る OJAD 講習会を世界各地で開催し，以下の情報提供を行なって いる。2015 年 4 月の時点で国内外の 63 都市を訪問した（OJAD 2015b）。参加者の多くは日本語教師 であるが，時には，学習者の方が多い環境で行なうこともある。 • 日本語アクセント，イントネーションに関する基礎知識。特にアクセント結合，アクセント句など 日本語特有の韻律制御について。 • アクセントやイントネーションが不適切な発声を，母語話者はどのように聞いているのか，に関 する調査結果。 • OJAD 四機能について，演習形式でのワークショップ。 • 日本語クラスにおける OJAD の実践的活用について，実例を踏まえた紹介。 どの地でも，本システムの提供を歓迎してくれる。ある日本語教師からは「日本語教育の中で，ぽっ かりと空いていた大きな穴が，ようやく埋まろうとしている。」と評価して戴いたこともある。また，社 会人や日本語教師となった多くの非母語話者から「学生の時にこれがあれば・ ・ ・」と，溜め息混じりで呟 かれたことも多い。第 2.3 節にて指摘したように，音声合成研究では「アクセント制御が正しく行なわ れないと売れない」という背景から，任意テキストに対して適切にイントネーションやアクセントを振 る技術開発が行なわれてきた。その精度に多少なりとも目をつむれば，OJAD が提供するアクセント核 位置の自動付与機能は，匂坂・佐藤（1983）にあるように，30 年前でも実現可能だったはずである。筆 者が思うに音声合成技術者は，テキストを声にすることばかりに（合成音声を売ることばかりに）執着 し，音声化の前処理プロセス・情報処理結果の呈示を求めているユーザがいることに気付いていなかっ たのかもしれない。一方日本語教育者は，駅，空港，電車，公園でのアナウンス，CALL サービスなど， 様々な場でテキストが音声化されている事実，そしてテキストを音声化する各種要素技術に対してあま りにも無関心だったのかもしれない。そしてその結果が，OJAD 講習会では， （かつての学習者から）大 きな溜め息として聞かれることになる。音声言語技術・自然言語技術に携わる者，語学教育に携わる者 が歩み寄る場は他にもあるものと思われる。現在の学習者が将来，大きな溜め息をつかぬよう，両者の 対話を継続する必要性を強く感じている。 なお，OJAD 講習会には学習者も参加しているが，アクセント学習を必須のものとして彼らに要求し ているものではない。講習会では，単語アクセントは地方性，方言性と関連することが多く，話し手の アクセントが聞き手の母語方言と異なる場合，聞き手は「出身地はどこかしら？」と感じることなどを 紹介し，決して，聞き取りが困難となるものではないことを強調している。それでも東京方言（共通語） のアクセントを学びたい学習者には OJAD を勧めている。中には「漫才を学びたいので，大阪弁 OJAD は作れないのか？」と聞いてくる海外の日本語学習者もいる。関東出身の役者がドラマで大阪弁を話し た時に，不自然なアクセント6 を嫌う大阪の視聴者は多い。海外の日本語学習者が「漫才を学びたい」と 意思表示した時に， 「アクセントはやらなくてよい」と言えるだろうか？最多の日本語学習者を有する国 は中国であり，彼らに日本語の単語アクセントがピッチアクセントであることや，句を単位としたアク セント制御があることを教えると，非常に興味を持つ（平野 2014）。彼らの学習意欲をより満たし，よ り効率良く学べるインフラとなるよう，OJAD を改良して行きたい。 まとめ 6 本論文ではまず，筆者が考える日本語韻律教育の現状や問題点について整理し，それらと関連づける 形で，日本語韻律教育インフラである OJAD (Online Japanese Accent Dictionary) の開発について述 べた。特に，音声・テキストコーパスの利用形態について詳説し，OJAD の評価，運用実績，講習会の 様子についてもまとめた。OJAD の構築と普及が，日本語音声教育，特に韻律教育の底上げや効率化に， 少なからず貢献できていれば幸いである。Project OJAD ではユーザからのフィードバックを随時受け 付けている。OJAD（2015a）に掲載されている連絡先まで問い合わせて戴きたい。また，facebook に OJAD ページを用意しており，各種の最新情報（新規機能の説明を含む）をこちらに掲載している。こ れも OJAD（2015a）から辿ることができる。なお筆者は日本語教育を専門とする者ではないため，本 論文中に不適切な記述が散見されている可能性がある。その場合は是非ともご指摘願いたい。 参考文献 [阿・林 2010] 阿栄娜，林良子 (2010) 「シャドーイング練習による日本語発音の変化 ∼モンゴル語・中 国語母語話者を対象に∼」『電子情報通信学会音声研究会』SP2009-151，19–24. [磯村 2014] 磯村一弘 (2014) 「日本語教師のための音声指導入門」音声学入門講座，日本音声学会 [NHK 1998] NHK(1998) 『NHK 日本語発音アクセント辞典新版』，NHK 出版. [笈川 2014] 笈川幸司 (2014) 「中国人学習者を対象とした効果的な音声指導の実践」日本語教育セミナー， Project OJAD http://youtu.be/aQv8XSXP7DQ http://youtu.be/IJCiBDitQ_g (2015 年 4 月 29 日最終参照) [音声資源 2015] 音声資源コンソーシアム (2015) “Japanese News Article Sentences (JNAS)”, http://research.nii.ac.jp/src/JNAS.html (2015 年 4 月 29 日最終参照) [KDDI 2015] 株式会社 KDDI 研究所 (2015) 「音声合成ソフトウェア「N2」TTS ライブラリ DSK」 http://www.kddilabs.jp/products/audio/n2tts/product.html (2015 年 4 月 29 日最終参照) 6 当然関東出身の視聴者には，どこがどう不自然なのか分からないことが多い。 [黒岩他 2007] 黒岩龍，峯松信明，伝康晴，広瀬啓吉 (2007) 「単独ラベラによる大規模アクセントデー タベースの構築およびそれを用いた統計的アクセント結合処理の検討」『電子情報通信学会音声研 究会』SP2006-174，31–36. [匂坂・佐藤 1983] 匂坂芳典，佐藤大和 (1983) 「日本語単語連鎖のアクセント規則」 『電子情報通信学会 論文誌』J66-D(7)，849–856. [鈴木他 2013] 鈴木雅之，黒岩龍，印南佳祐，小林俊平，清水信哉，峯松信明，広瀬啓吉 (2013) 「条件付 き確率場を用いた日本語東京方言のアクセント結合自動推定」 『電子情報通信学会論文誌』J96-D(3)， 644–654. [鈴木・峯松 2013] 鈴木雅之，峯松信明 (2013) “Tokyo Accent Sandhi Estimation Toolkit (TASET)”, https://sites.google.com/site/suzukimasayuki/accent (2015 年 4 月 29 日最終参照) [砂川 2015] 砂川有里子 (2015) 基盤研究 (A)「汎用的日本語学習辞書開発データベース構築とその基盤 形成のための研究」 http://jisho.jpn.org (2015 年 4 月 29 日最終参照) [JEITA2010] 電子情報技術産業協会規格 (2010)，JEITA IT-4006， 「日本語テキスト音声合成用記号」 http://www.jeita-speech.org (2015 年 4 月 29 日最終参照) [轟木・山下 2009] 轟木靖子，山下直子 (2009) 「日本語学習者に対する音声教育についての考え方–教師 への質問紙調査より」『香川大学教育実践総合研究』18，45–51. [中川・許・中村 2009] 中川千恵子，許舜貞, 中村則子 (2009) 『さらに進んだスピーチ・プレゼンのため の日本語発音練習帳』ひつじ書房. [交流基金 2013] 日本国際交流基金 (2013) 「海外日本語教育機関調査・速報値発表」 http://www.jpf.go.jp/j/about/press/dl/0927.pdf (2015 年 4 月 29 日最終参照) [橋本・峯松・廣瀬 2014] 橋本浩弥，峯松信明，広瀬啓吉 (2014) 「CRF による日本語東京方言アクセン ト変化推定の改善」『日本音響学会春季講演論文集』1-R5-28，443–444. [平野他 2009] 平野宏子，広瀬啓吉，河合剛，峯松信明 (2009) 「母語話者と中国語話者の日本語朗読音 声の基本周波数パターンの比較」『日本音響学会誌』65(2)，69–80. [平野 2014] 平野宏子 (2014) 「総合日本語の授業で行うゼロ初級からの音声教育の実践 –アクセント, イントネーションの自然性を重視した視覚化補助教材の使用–」『国立国語研所論集』7，45–71. [藤崎・須藤 1971] 藤崎博也，須藤寛 (1971) 「日本語単語アクセントの基本周波数パターンとその生成 機構のモデル」『日本音響学会論文誌』27(9)，445–453. [OJAD 2015a] Project OJAD(2015) “Online Japanese Accent Dictionary”, http://www.gavo.t.u-tokyo.ac.jp/ojad/ (2015 年 4 月 29 日最終参照) [OJAD 2015b] Project OJAD(2015) 「OJAD 講習会」 http://www.gavo.t.u-tokyo.ac.jp/ojad/pages/workshop (2015 年 4 月 29 日最終参照) [OJAD 2015c] Project OJAD(2015) “OJAD プロモーションビデオ” http://youtu.be/kPJifu2aBXg (2015 年 4 月 29 日最終参照) [峯松他 2013] 峯松信明，中村新芽，鈴木雅之，平野宏子，中川千恵子，中村則子，田川恭識，広瀬啓吉， 橋本浩弥 (2013) 「日本語アクセント・イントネーションの教育・学習を支援するオンラインインフ ラストラクチャの構築とその評価」『電子情報通信学会論文誌』J96-D(10)，2496–2508. [Jenkins 2009] Jenkins, J. (2009) World Englishes: a resource book for students, Routledge. [Minematsu and Hirose 1995] N. Minematsu and K. Hirose(1995) “Role of prosodic features in the human process of perceiving spoken words and sentences in Japanese,” J. Acoust. Soc. Japan(E), 16(5), 311–320. [Pinet 2010] Pinet, M., P. Iverson and M. Huckvale(2010) “Second-language experience and speechin-noise recognition: the role of L2 experience in the talker-listener accent interaction,” Proc. SLaTE (CD-ROM). 表 3: イントネーション・アクセント呈示システムに対する教師の評価（%） a) 学習者に役立つと思いますか？ b) 授業で使いますか？ 非常に役立つ 62.7 是非使いたい 42.6 少し役立つ 28.8 必要があれば使いたい 50.0 あまり役立たない 8.5 自分の授業には必要ない 7.4 全く役立たない 0.0 図 7: 2012 年 8 月に公開後，2015 年 4 月までの週単位でのアクセス数の変化
© Copyright 2024 ExpyDoc
