AIとりリンガルとは

ひと目でわかる

どうやって気持ちを推定するの？

録音した声から、スマホの中で6つの音のとくちょうをはかるよ。粗さは音のざらつき、純度は澄みぐあい、帯域は音の高さの広がり、持続は鳴いている長さのこと。AMは音の大きさのゆれ、エネルギーは音の大きさを表しているよ。

録音とはかった値をGoogleのGeminiにわたして、まずセキセイインコの声かをたしかめるんだ。そのあと、11種類の声と「分類不能」のどれに近いかを選ぶよ。

気持ちは、「快・不快」と「落ち着き・興奮」の2つの軸で表すよ。心地よいか、いやな気持ちかと、落ち着いているか、興奮しているかという見方なんだ。快・不快は声の種類と場面から決め、落ち着き・興奮と画面に出る気持ちのことばはプログラムが決めるよ。

結果には、確度という、声ごとに置いた典型パターンにどれくらい近いかを示す目安がつくよ。表示は高確度、中確度、低確度。くわしい流れは分類の作り方を見てね。

ほんやくカードの一言について

結果の画面には、「ねえねえ、そこにいる？」のように、うちの子がしゃべっているような一言が出るよ。

この一言は、推定した声の種類と気持ちをもとにAIが作った、うちの子のセリフのイメージなんだ。鳥が本当にそのことばを言っているわけではないよ。

一言の下の「くわしく」をひらくと、声の種類や確度、判定の理由、音のとくちょうのグラフを見られるよ。

鳥の鳴き声を翻訳できる？

鳥の鳴き声を人のことばに一語ずつ置きかえる辞書は、AIとりリンガルが読んだ研究の中にはないよ。

研究でわかっているのは、セキセイインコの声には、主にオスが長く歌う「ワーブル」と、短い「コール」があること。どの声がどんな場面で出るか、といったことも調べられているよ ^[1]。

AIとりリンガルでは、こうした研究をもとに声の種類と気持ちを推定して、それを一言にして見せているよ。だから「ほんやく」は、ことばの直訳ではなく、気持ちの推定を一言にしたものなんだ。

インコが何を言っているか、AIでわかる？

AIが判定しているのは、「どの種類の声か」と「どんな気持ちのときの声か」だよ。「何を言っているか」を読み取っているわけではないんだ。

声は鳥ごとにちがうよ。ペアになるとオスが相手の声をまねて、2羽の声がにてくる ^[4]。歳をとっても声を学ぶ力はたもたれるので ^[5]、同じ種類の声でも、うちの子の声は典型からずれることがあるよ。

AIとりリンガルでは、結果がちがうと思ったら「ちがう」で正しい種類をえらべるよ。そのきろくは直近20件まで、同じ飼い主さんの次からの判定で、参考としてAIにわたるしくみ。ほかの人のきろくはまざらないよ。

セキセイインコの鳴き声から気持ちはわかる？

興奮の度合いが声にあらわれるしくみは、種をこえて共通しやすい一方、快・不快のあらわれ方は種ごとにちがうよ ^[2]。哺乳類の研究では、興奮が高いと、声が大きく、鳴く回数が多く、声が高くなるとされているんだ ^[3]。

だから、音だけで快・不快を決めるのはむずかしいよ。どんな場面で出た声かを合わせて読むのが大事なんだ。

AIとりリンガルでは、声の種類と場面から快・不快を、はかった音から落ち着き・興奮を決めるよ。画面に出るのは、「興奮・喜び」「リラックス・安心」「恐怖・警戒」のようなことば。声ごとのくわしい説明は鳴き声辞典を見てね。

鳥版バウリンガルはある？

バウリンガルは、犬の鳴き声から気持ちを当てるおもちゃだよ。2000年代にはやったんだ。

鳥の声を聞きわけるAIでは、何の鳥が鳴いているかを当てる「種類判定」のものがよく知られているよ。たとえばMerlin Bird ID（コーネル大学鳥類学研究所）は、鳴き声や写真から鳥の種類を見わけるもの ^[6]。BirdNETは、深層学習という、録音から音のとくちょうを学ぶAIのしくみで、世界の6,000種以上の鳥を声から見わける研究プロジェクトだよ ^[7]。どちらも「どんな気持ちか」を推定するものではないんだ。

AIとりリンガルは、「犬にバウリンガルがあるなら、鳥にもあっていい」という飼い主の思いから作った、セキセイインコ向けのアプリだよ。くらべた表は鳥の鳴き声を翻訳するAIはある？にまとめているよ。

アプリをダウンロードする必要はある？

ダウンロードはいらないよ。AIとりリンガルは、ブラウザで使えるアプリ。スマホやパソコンのブラウザで ai-tori-lingual.web.app をひらけば使えるよ。

アプリストアには、鳥のほんやくをうたうアプリがいくつかあるけれど、AIとりリンガルはそこには出していないんだ。

AIとりリンガルでは、マイクの使用をブラウザで許可すると録音できるよ。見守りモードでは、カメラの許可もいるよ。

ほかの鳥でも使える？

判定のしくみは、セキセイインコの研究をもとに作っているよ。録音がセキセイインコの声かどうかを最初にたしかめて、ちがうと判断したら「鳥の鳴き声が検出されませんでした」と返すんだ。

AIとりリンガルでは、セキセイインコ以外の鳥は対象にしていないよ。

お金はかかる？

いまは無料で使えるよ。

AIとりリンガルでは、たくさんの人が同時に使ったときのために、1時間あたりのほんやく回数に上限を設けているんだ。上限に達しても、しばらくすると自動でまた使えるようになるよ。