hirax.net::Keywords::「音声」のブログ

■フリーの音声辞書　

　二万語を音声で聞くことができる辞書(StarDict)の説明。　　from 2,000円弱で音声英和辞書引き環境を.

■「現実世界」をコミック調にする　

撮影映像のアニメーション化

　実際の映像を、絵画・イラストレーション・コミック調に加工処理した映像がたまにあります。たとえば、古いところでは、A-haの「Take on me」のPVなどがありますし、最近では、キアヌ・リーブスが主演したアニメーション映画「A Scanner Darkly」などもそうです。好き嫌いがわかれそうですが、画像が単純化されたイラスト・マンガ風に映し出された世界にはやはり目が惹かれてしまう、という人も多いことでしょう。

　かつては、カメラで撮影した映像を１コマごと手作業でなぞる（参考：ロトスコープ）ことも多かったと言いますが、A Scanner Darkly の場合などでは、ボブ・サビストンが開発した Rotoshop が、実写をアニメーション化する際に活用され、撮影・作業工程がいくぶん楽になったとも言われています。

　デジカメで撮影した写真といった静止画像を各種イラストレーション調にするソフトウェアは数多くあります。また、動画処理ソフトウェアでも、ポスタリゼーション（減色処理）などの特殊効果を組み合わせれば、動画をイラスト風にすることができるものもいくつかあります。先日作成した、画像加工サービス Imagination You Make でも、各種絵画調に画像を変えるような処理が含まれていましたが、その中のイラストレーション調に画像を加工する部分などは、実は動画にも対応しています。Imagination You Make というWEBサービス 自体はJPEG画像のアップロード・加工にしか対応していないのですが、画像を処理・加工する部分に関しては動画の入出力（もちろん加工処理も）もできるようになっています。

「二次元レッシグ」を作る

　Imagination You Make の「イラストレーション処理」の使用例は、たとえば次の2枚の画像です。

　左の1枚目の写真が実際の画像で、それに対して「イラストレーション化」をかけたものが右の2枚目の画像です(*)。「イラストレーション化」処理は、「カラー版画化」処理などと違って、輪郭線強調の度合いが小さいので、コミック調という感じではありませんが、それなりにイラストレーション風になっているのがわかります。

　動画映像に「イラストレーション化処理」をかけてみた時に、どのような映像に見えるか・映像に対してどのような印象を持つかを知るために、今回、スタンフォード大学ロー・スクールのレッシグ教授のインタビュー映像に対してイラストレーション化処理をかけてみました。右のGIF画像はその結果です。QuickTime形式の動画ファイルは le.mov (16MB) になります(*)。ほんの数秒のアニメーションですが、実際の映像よりもずいぶん単純化されて、実写とは異なった雰囲気を感じます。長時間眺めると目が疲れてしまうそうな気もしますが、たとえばCM映像のようなごく短時間の映像であれば、一種独特に抽象化された世界を味わうことができるかもしれません。

現実世界のコミック化

　Podcast の音声部分をテキスト化するサービスはすでにあります。また、Imagination You Make のように、デジカメで撮影された画像中をコミック調にしたり、顔抽出を行い、適切な部分に吹き出しをつけることができるWEBサービスもすでにあります。こういった技術を組み合わせることで、Podcast などで配信されている実写映像をマンガ風・コミック調アニメーションにしたりするといったことは、ごく近いうちに実現できることでしょう。

　よくある街並みを撮影した映像や、よく知っている人たちが写っている映像をコミック調・イラストレーション化したら、どのような世界が見えるのでしょうか。そんな世界を眺めたら、どう感じるのでしょうか。アニメーション・映画作成会社でない普通の人でも、「ちょっとアニメーションを作ってみる」ということができたら面白いかもしれません。ちょっと作ってみたたくさんのアニメーション中から、いくつかの新しいものが生まれてくるかもしれません。商業的な映像を作り上げることは難しいかもしれませんが、「ちょっとアニメーションを作ってみる」ということは、もう簡単にできるようになっているのかもしれません。

* 使った素材は、NTTインターコミュニケーション・センター[ICC]によるHIVE インタヴュー・シリーズ 01：ローレンス・レッシグ のインタビュー映像です。そのため、上記映像をもとに作成された3枚の画像、および、QuickTime 映像はクリエイティブ・コモンズ 非営利-継承ライセンス になります。

■「ちりとてちん」と「地獄八景亡者の戯れ」と「自己言及パラドクス」　

　NHKの朝の連続ドラマ「ちりとてちん」がもうすぐ終わる。エンディングに近づきつつある「ちりとてちん」では、冥土ツアーが語られる落語「地獄八景亡者の戯れ（じごくばっけいもうじゃのたわむれ）」を演じる音声が、画面の後ろに流れているシーンも多い。

　もともとこの話は、その時その時の事件や世相流行などをとり入れて、言わばニュース性を持たせてやる演出で伝わってきたものです。

　森下伸也の「逆説思考」～自分の「頭」をどう疑うか～（光文社新書）を読んでいると、冥土ツアーが語られる落語「地獄八景亡者の戯れ（じごくばっけいもうじゃのたわむれ）」における、自己言及的パラドックスが挙げられていた。

　このはなしの一応の原典と見てよいものは江戸時代の小咄本にありますが、各地の民話にもあり、また欧州の民話にもあるそうで、…本当の原典は従ってよく判らないというのが答えと言えましょう。

　森下伸也「逆説思考」で挙げられている「地獄八景亡者の戯れ」での自己言及的パラドックス一つは、三代目桂米朝のものであ り、もう一つは桂文珍のものである。ちなみに、桂米朝のものはこんな感じの「地獄八景」である。

　 冥土の歓楽街に、亡くなった過去の名人の名前が豪華に並んでいる。よく見ると、そこに「桂米朝」の名前もなぜかある。
「そないな名の亡くなった落語家いてへんやろ？」
「よう見て下さい。”近日来演”って張り紙してありまっせ」
「なるほど、本人はそれも知らんと落語でもしてるんですやろな」

　　桂米朝 「地獄八景亡者の戯れ」

　もうひとつ挙げられている桂文珍のものは、閻魔の前で特技の落語として「地獄八景亡者の戯れ」を披露し始めると、その話の中でさらに、「地獄八景亡者の戯れ」が展開されて…というM.C.エッシャー描く版画のような、「地獄八景」である。

　それにしても、ドラマ「ちりとてちん」は面白い。あと、一週間で終わってしまうのが残念だけれど、本当に旨く美味しい「半年間ほどの短編ドラマ」だと思う。一見長く見えるけれど、短いショート・ショートの連作のような、実はそれが繋がっている一つの短編小説のような、そんな素敵な作りだ。

　その内に、これを十八番の持ちネタとして新しい「地獄八景」を作ってくれる人が出てくることでしょう。

　何ヶ月かすると、このドラマのことも忘れてしまうかもしれない。けれど、何かの折に受ける印象・する選択に、どこかで影響を与えたりしてくれたら良いな、と思う。

■アクティブ・ノイズ・キャンセリング PC を作る　

　「周りの騒音が大きな場所で、集中してPC作業をしたい」と思うことがあります。そんなときに、ふとこんなことを思いつきました。

　PCのマイク入力から環境音を取得して、その逆位相の音をスピーカーから出力したら、PCのごく近くの領域だけは、ノイズ＝ゼロの理想的な作業環境が生じるのではないだろうか？

　1分クッキングで作った「サウンド入力の逆位相の音をスピーカーから出力するモデル」が下中央で、（試しに動かした時の）下左画像はサウンド入力の波形で、下右画像はサウンド出力画像になります。なお、両者ともオートスケールなので、一見するとDCレベルが違っているように見えますが、DCレベルは同じです。(そもそもDC成分はサウンド入出力では無視されますし)

　PC周囲の騒音を逆位相の音波で消せたか・・・というと、その効果は全然わかりませんでした。大雑把な計算では、低音騒音は消せそうな気がしたのですが、1分クッキングのアクティブ・ノイズ・キャンセリング・モデルでは何の効果もありませんでした。・・・というわけで、「アクティブ・ノイズ・キャンセリング PC を作る」という楽しい課題がここに生まれたのです。

■安顕微鏡レンズを付けたスマホでレコードを撮影して音声化してみよう!?　

　最近のデジカメでレコードを撮影すると「レコード溝がクッキリ見える」という話を読んだ。ということは、”スマホでレコードを撮影すると音声再生するアプリができる時代が来そう”と思って呟くと、「思ったことは一体いつやるの！？今でしょ！今！」と諭された。…確かに、思ったことは、その時にやらないといつまで経っても何もできないような気もしてきます。

　そこで、ディスクユニオン横浜関内店に行くと、ちょうど「本日だけ！650円以下の全商品が100円！セール」をやっていたので、薬師丸ひろ子「セーラー服と機関銃」を買い、300円くらいの安い顕微鏡キットを付けたiPhone 6sでレコード溝を撮影してみました

　撮影手順は、静止画像で何枚も撮るのは面倒だったので、顕微鏡キットを取り付けたiPhone 6sを高速度撮影モードにして、レコードの上を滑らせながらの撮影です。そして、高速撮影動画を位置合わせ合成し、溝の太さをデジタル化することで、左右チャンネルを合成した音声ファイルを作成してみました。

　撮影した動画例は、下のようになります。実際には、レコード針が進む方向にとても長い画像ですが、左下の画像例は、それを圧縮したり・一部を拡大してみたものです。

　デジタル化したレコード溝の太さを、グラフにしてみたものが、下の画像です。また、音声ファイル（WAV）化してみたものもここに置いておきます。
　今回処理してみたのは、とても短い時間分なので、音楽として聞こえるようなものではありません。けれど、普通のスマホ＋300円くらいで、アナログレコードの音声デジタル化撮影が（普通に？）できるようになっているのは、何だか少し面白いものです。