Rosetta stone with Audio
─音声付ロゼッタストーン─
最終更新  H21.11.11
0.以下の長ったらしい文章は読んでられない!まず試してみたいという方。ダウンロード
1.定義
(1)文
 音声とそれに対応する文章がある場合に、
@その文章をデジタル化したうえで、その文章を句点まで、ピリオドまでと、文を最小単位に分割し、分割したものを
配列を使ってまとめる。
A音声をデジタル化し、その音声ファイル上の上記の分割した一文一文に対応する時間的位置を記録したうえでこれを
配列を使ってまとめる。
B配列の文を見ながらそれに対応する時間的位置に従って音声ファイルから音声を聞くことができるプログラムを作る。
これにより聞き手の側が任意の一文または複数の文を確認しながらそれに対応する音声を聞くことができるようにする。
C配列の文に対訳、キーワード訳を付ける。
(2)詩
 表記の形式を尊重して、分割の基準を以下のようにする。
(一)分割点
(イ)原則 行末。
(ロ)例外  @いわゆる句またがりといった場合や読み手の流儀で、行末に休止点がなく、ここで音声を中断することが
      不自然な場合は、この行末は分割点としない。
     A行の中間でも音声上明らかに休止点があり、かつ行末に休止点がなく、さらにここで休止することが文法的
      にも妥当と考えられる場合は、この点も分割点とする。
(二)表示方法
(イ)原則 配列としてまとめられた一行一行を上から順に表示してゆき、あたかも本来の詩の表記と同様の表示になるよ
     うにする。
(ロ)例外  @ある行の行末を分割点とせず、従って複数行が配列の一つの要素となる場合、この一つの要素の表示として
      は複数行になるように表示し、あたかも本来の詩と同様の表示になるようにする。
     A行の中間点を分割点とする場合、一つの行の文字が前後二つの配列の要素に分かれて含まれることになる。
      その場合も二つに分かれた一行の文字の横軸の位置は本来の表記の位置と同様にする。これにより視覚的に
      本来一行であったこと及び行頭、行末を認識できるようにする。
2.利点 言語を体系的、効率的に理解するには文字、文章を介して行うのが効果的である。
しかし従来の字幕では理解することは困難である。なぜなら第一に音声の聞き取りは言語によって母音の数が違っていた
り、日本語に原則としてない子音のみの発音があったりしてそれ自体が難しいこと。第二に聴覚による音声の認識と視覚
による文字の認識を同時にやらなければならないこと。第三に話し手の話す速度で流れていき聞き手は認識できない点が
あっても流れてしまうため消化不良になってしまうことである。
 そこで本システムは、聞き手が文を最小単位に、文法的な構成の確認も意味の確認もしながら、聞き取れるまで何度で
も聞き直すことができるようにしたものである。

3.完成例(以下の例は英語ですが、他の言語にも適用できます。)
(1)ニュース


(2)ハムレットの出だし


(3)ユーザーインターフェイスの使用例
 (1)の例では、[一文]をクリックすると 1番の文(WE PUT THE FAMILIES.)の音声を聞くことができる。[次文]をクリック
すると2番の文(WE STAND STRONG WITH THE PEOPLE OF SPAIN.)の音声を聞くことができる。[数文]をクリックすると 3番
から8番までの文の音声を聞くことができる。

4.当システムの構成要素
(1)-.xslファイル
 ある作品のテキスト(すでに著作権の保護期間が切れて、無料でインターネット上に公開されているもの)の一文、一文を
分割したものをエクセルファイルのセルに上から順に入れたもの。フリーのebookを使用させていただく。

(2)音声ファイル(wav又はmp3)
@原則 フリーのaudiobookを使用させていただく。
    (ダウンロード先でダウンロードしようとしたところ、音声が再生されてしまったという方
      左クリックではなく、右クリック→対象をファイルに保存)
A例外 CDを購入し、CD一枚を一つの音声ファイルに変換したものを使用する。
 フリーのaudiobookの長い作品は、音声ファイルをいくつかに分割してダウンロードするようになっています。音声ファイルは
すべてダウンロード先からダウンロードするようにしてもよいのですが、100MBに近づくまでは最初の部分だけは当サイトからま
とめてダウンロードできるようにしておきます。
(3)-.csvファイル
 上記エクセルファイルの一文、一文の音声ファイル上の時間的位置を記載したもの。
(4)上記csvファイルを読み込んで音声ファイルを再生するソフト。
@xf.exe  1音声に対応するソフト
Axf2.exe  2音声に対応するソフト
5.実施例
[1].xlsファイル
 音声ファイルを再生するためのxf.exeとはプログラム的に何ら関連させていないので通常のエクセルファイルとして開く。xf.exe
を開くために必要があれば最小化する等の措置をとる。
[2]xf.exe

(1)xf.exeのアイコンをダブルクリックするとユーザーインターフェイスが現れる。
(2)[開1]をクリックするとコモンダイアローグ(音声ファイルを開く)が現れるので、.xlsファイルに対応する音声ファイルを開く。
(キャンセルを押すとプログラム全体が終了するようにプログラムされている)
(3)[開2]をクリックするとコモンダイアローグ(CSVファイルを開く)が現れるので、音声ファイルに対応するCSVファイルを開く。
(4)前提としてユーザーインターフェイスにある三つのエディットテキストボックスを左からE1,E2,E3とする。E1,E2,E3はエデ
ィットテキストボックスであることからボックスをクリックして適当な数字をキーボードから入力できるし、また[上][下]ボ
タンをクリックして1つずつ繰り上げたり繰り下げたりすることができる。
(5)[一文]をクリックするとE1で指定した番号の文の音声が再生される。
(6)[次文]をクリックするとE1で指定した番号の文の終わりから次の文の終わりまで再生される。
そしてE1の番号が1つ繰り下がる。
@文と次の文の間に間奏がある場合に[次文]ではこの間奏を含めて再生される。[一文]では間奏を除いて再生される。 
A例えばAが話し終わる前にBが話し出したような場合で[次文]をクリックしてBの文の番号になるような場合は、Aが話し終わった後
すなわちBの文の途中から再生される。この場合に[一文]をクリックするとBの文の初めから再生される。
(7)[数文]をクリックするとE2の文の初めからE3の文の終わりまで再生される。
(9))xf.exeはDirectShowを使っているためDirectShowに対応していない古いSound Cardでは正常に作動しません。だいたい
Windows2000以降に作成されたものならば大丈夫です。
6.例外 
(1)実際にやってみると、一文が非常に長い場合があります。その場合例外的に、「:」「;」「,」「-」で区切ってひとまとめ
にした場合 があります。
7.当サイトの提供するものはすべてフリーです。その使用の結果、万が一不具合が生じても責任を負いかねます。
8.プログラムのダウンロード
xf.exe  xf2.exe
9.ライブラリ
T 文
(1)King Lear by William Shakespeare  ─リア王─
@ダウンロード
A残りの音声ファイルを取得する所。
(2)Arthur Conan Doyle A Study in Scarlet ─ホームズ 緋色の研究─
@ダウンロード
A残りの音声ファイルを取得する所。
(3)Edgar Allan Poe THE BLACK CAT. ─ポー 黒猫─
@ダウンロード
(4)Arthur Conan Doyle The Sign of Four   ─ホームズ 四つの署名─
@ダウンロード
A音声ファイルを取得する所。
(5)H.G.Wells The Time Machine   ─H.G ウェルズ タイムマシン─
@ダウンロード
A音声ファイルを取得する所。
(6)H.G.Wells  THE DOOR IN THE WALL   ─H.G ウェルズ 塀についた扉 ─
@ダウンロード
A音声ファイルを取得する所。
(7)H.G.Wells  THE RED ROOM.   ─H.G ウェルズ 赤い部屋 ─
@ダウンロード
A音声ファイルを取得する所。
(8)H.G.Wells  The War of the Worlds  ─H.G ウェルズ 宇宙戦争 ─
@ダウンロード
A音声ファイルを取得する所。
(9)Edgar Allan Poe  THE MURDERS IN THE RUE MORGUE   ─ポー モルグ街の殺人 ─
@ダウンロード
A音声ファイルを取得する所。
(10)Robert Louis Stevenson  The Strange Case of Dr. Jekyll and Mr. Hyde   ─スティーブンソン ジキル博士とハイド氏 ─
@ダウンロード
A音声ファイルを取得する所。
(11)Robert Louis Stevenson TREASURE ISLAND ─スティーブンソン 宝島 ─
@ダウンロード
A音声ファイルを取得する所。
(12)Utopia, by Thomas More, Edited by Henry Morley─トマス モア ユートピア ─
@ダウンロード
A音声ファイルを取得する所。
U 詩
(1)ALONE by Edgar Allan Poe   ─ポー アロン─ 
@ダウンロード
A音声ファイルを取得した所。
(2)The Raven by Edgar Allan Poe   ─ポー 大鴉─ 
@ダウンロード
A音声ファイルを取得する所。
(3)The Rolling English Road by G.K. Chesterton  
@ダウンロード
A音声ファイルを取得する所。
(4)The Divine Comedy(Inferno) by Dante Alighieri. Translated by Henry Wadsworth Longfellow
  ─ダンテ 神曲(地獄編)ロングフェロー訳─
@ダウンロード
A音声ファイルを取得する所。
V 漢詩
(1)月下獨酌  李白─(Taiwanese - Sung) Read by: Li Su-hsiang─ 
@ダウンロード
A音声ファイルを取得した所。
(2)春望  杜甫─(Hokkien) Read by: Mr Zhuang Shiguang ─ 
@ダウンロード
A音声ファイルを取得する所。
(3)涼 州 詞  王翰─Read by: Jia Zhou─ 
@ダウンロード
A音声ファイルを取得する所。
W Bible (The American Standard Version of the Holy Bible )
(@)The Old Testament
(18)The Book of Job  ─ヨブ記─ 
@ダウンロード
A音声ファイルを取得する所。
(A)The New Testament
(1)The Gospel According to St. Matthew  ─マタイによる福音書─ 
@ダウンロード
A音声ファイルを取得する所。
(2)The Gospel According to Saint Mark ─マルコによる福音書─ 
@ダウンロード
A音声ファイルを取得する所。
(3)The Gospel According to St. Luke─ルカによる福音書─ 
@ダウンロード
A音声ファイルを取得する所。
(4)The Gospel According to Saint John ─ ヨハネによる福音書─ 
@ダウンロード
A音声ファイルを取得する所。
(5)The Acts of the Apostles  ─使徒行伝─ 
@ダウンロード
A音声ファイルを取得する所。
(6)The Epistle of Paul the Apostle to the Romans  ─ローマ人への手紙─ 
@ダウンロード
A音声ファイルを取得する所。
(7)The First Epistle of Paul the Apostle to the Corinthians ─コリント人への第一の手紙 ─ 
@ダウンロード
A音声ファイルを取得する所。
(8)The Second Epistle of Paul the Apostle to the Corinthians  ─コリント人への第二の手紙 ─ 
@ダウンロード
A音声ファイルを取得する所。
(9)The Epistle of Paul the Apostle to the Galatians  ─ガラテヤ人への手紙 ─ 
@ダウンロード
A音声ファイルを取得する所。
(10)The Epistle of Paul the Apostle to the Ephesians ─エペソ人への手紙 ─ 
@ダウンロード
A音声ファイルを取得する所。
(11)The Epistle of Paul the Apostle to the Philippians  ─ピリピ人への手紙 ─ 
@ダウンロード
A音声ファイルを取得する所。
(12)The Epistle of Paul the Apostle to the Colossians  ─コロサイ人への手紙─ 
@ダウンロード
A音声ファイルを取得する所。
(13)The First Epistle of Paul to the Thessalonians   ─テサロニケ人への第一の手紙─ 
@ダウンロード
A音声ファイルを取得する所。
(14)The Second Epistle of Paul to the Thessalonians  ─テサロニケ人への第二の手紙─ 
@ダウンロード
A音声ファイルを取得する所。
(15)The First Epistle of Paul the Apostle to Timothy   ─テモテへの第一の手紙─ 
@ダウンロード
A音声ファイルを取得する所。
(16)The Second Epistle of Paul the Apostle to Timothy  ─テモテへの第二の手紙─ 
@ダウンロード
A音声ファイルを取得する所。
(17)The Epistle of Paul to Titus   ─テトスへの手紙─ 
@ダウンロード
A音声ファイルを取得する所。
(18)The Epistle of Philemon   ─ピレモンへの手紙─ 
@ダウンロード
A音声ファイルを取得する所。
(19)The Epistle to the Hebrews  ─ヘブライ人への手紙─ 
@ダウンロード
A音声ファイルを取得する所。
(20)The General Epistle of James  ─ヤコブの手紙─ 
@ダウンロード
A音声ファイルを取得する所。
(21)The First Epistle General of Peter  ─ペテロの第一の手紙─ 
@ダウンロード
A音声ファイルを取得する所。
(22)The Second Epistle General of Peter  ─ペテロの第二の手紙─ 
@ダウンロード
A音声ファイルを取得する所。
(23)The First Epistle of John  ─ヨハネの第一の手紙─ 
@ダウンロード
A音声ファイルを取得する所。
(24)The Second Epistle of John  ─ヨハネの第二の手紙─ 
@ダウンロード
A音声ファイルを取得する所。
(25)The Third Epistle of John  ─ヨハネの第三の手紙─ 
@ダウンロード
A音声ファイルを取得する所。
(26)Epistle of Jude  ─ユダの手紙─ 
@ダウンロード
A音声ファイルを取得する所。
(27)The Revelation to Saint John  ─ヨハネの黙示録─ 
@ダウンロード
A音声ファイルを取得する所。
X 歴史
(@)The History of The Decline and Fall of the Roman Empire
    Author: Edward Gibbon ─ギボン ローマ帝国衰亡史─
(1)Volume 1
@ダウンロード
A音声ファイルを取得する所。
(2)Volume 2
@ダウンロード
A音声ファイルを取得する所。
(3)Volume 3
@ダウンロード
A音声ファイルを取得する所。
(4)Volume 4
@ダウンロード
A音声ファイルを取得する所。
10.二言語二音声の試み
 音声付きロゼッタストーンを名乗る以上、最低でもこれを達成する必要があると考えやってみました。本システムの構成要素とし
て一定の作品とその音声ファイルが必要です。しかもできるだけフリーで手に入るものが望ましい。この条件をできるだけ満たすも
のとしてニーチェ、ツァラトストラかく語りきを選びました。
(1).xlsファイル
@独文テキスト 原文
A英文テキスト translated by Thomas Common 
(2)音声ファイル
@独語     CDを購入。  VolT.U購入先
               VolV.W購入先
A英語     現在、LibriVoxで制作中で、一部公開しているもののうち、T_1 THE THREE METAMORPHOSES.を ダウンロードして
        使わせていただく。
(3).csvファイル
@独語     VolT.U.V.Wに対応するものをすべて制作。
A英語     T_1 THE THREE METAMORPHOSES.に対応するものを制作。
(4)xf2.exeを使用する。
(5)ダウンロード