2000-02-06[n年前へ]
■パノラマ写真と画像処理 Pt.1 
パノラマ写真を実感する
「パノラマ」という言葉は何故か大正ロマンを感じさせる。かつて、流行ったパノラマ館や江戸川乱歩の「パノラマ島奇譚」という言葉がそういったものを連想させるのだろう。私も自分で写真の現像・焼き付けをしていた頃は、フィルム一本まるまる使ってベタ焼きでパノラマ写真を撮るのが好きだった。
そういう癖は持ち歩くカメラが「写るんです」と「デジカメ」へ変化した今でも変わらない。例えば、
の時に撮ったこの写真もそうである。 |
そしてまた、次に示す写真もそうだ。これは1999年夏頃の早朝に箱根の湖尻で撮影したものである。360度のパノラマを撮影したものだ。
 |
観光に行った先で撮影したと思われるかもしれないが、残念ながら違う。出勤途中に撮影したものである。豊かな自然がありすぎて、涙が出そうである。
パノラマ写真としては、こういう景色を撮ったものも良いが、人が写っているものも良い。私の勤務先がこの大自然の中に移転してくる前、都会の中にあった頃に居室で撮ったパノラマ写真などはとても面白い。窓の向こうにはビルが見えたり、周りに写っている人ですでに退職した人が何人もいたりして、涙無しには見られない。
もちろん、こういった写真はパノラマ写真で楽しむのも良いが、もっと実感できるものに加工しても楽しい。私がかつて都会の居室で撮影したものは、当時はAppleのQuicktimeVRのムービーファイルに変換して遊んでいた。今はもうない居室の中をグリグリ動かすのはホロ哀しいものがあり、とても味わい深かった。
ところで、WEB上でそういうパノラマのVRファイルを見せるにはどうしたら良いだろうか？もちろん、AppleのQuicktimeVRを用いれば良いわけではあるが、プラグインが必要である。私はQuicktimeは好きであるが、ブラウザーのQuicktimeのプラグインは嫌いである。WEBを眺めているときに、「Quicktimeのアップグレードはいかがでしょう？」というダイアログが出ると、少しムッとしてしまう。そこで、Javaを使うことにした。いや、もちろんJavaをサポートしていないブラウザーもたくさんあるが、こちらの方がまだ好きなのである。
そのようなパノラマのVRを実現するJavaアプレットには、例えば
- Panoramania
- http://www.lamatek.com/lamasoft/Panoramic/test.html
- Ｊａｖａアプレット（パノラマver1.1）
- http://village.infoweb.ne.jp/~fwbc6098/java/panorama/panorama.htm
- TheVRApplet1.0
- http://www.physik.uni-greifswald.de/~jonas/VRApplet/VRApplet.html
- how toinsert the panorama show (java applet) inside your home page ?
- http://persoweb.francenet.fr/~carl/brique/exapano1.htm
さて、ここまでは単なる前振りである。本題は、実はこれから始まる。先日このようなメールを頂いた。
私はWindowsを使っているのですが、AppleのQuicktimeVRに興味があって、QuicktimeVRのパノラマ・ムービーを作っています。しかし、素材となる画像の作成に四苦八苦しております。ご承知の通り、
- ライカ版カメラに２４ミリ広角レンズをつけて、
- 三脚にパノラマヘッドをつけて、ぐるりと周囲を１２枚撮りして、
- 現像、プリントし、
- スキャニングして、ステッチャソフトでレンダリングし、
- それをMacintosh上でMake-QTVR-Pａｎｏｒａｍａにドロップして、
- ８ミリビデオに広角レンズを付け、
- ９０度横倒しにして、１０秒程度で１回転するようにステッピングモーターで駆動するパノラマヘッド（自作）に乗せ、
- 高速シャッター撮影し、
- マックのＡＶ機能で円周１２枚の静止画を取り出
- し、
- ８ミリビデオを横倒しにして、
- モーター回転するヘッドでぐるりと３６０度撮影し、
- その撮影した動画ファイルの、各フレームから走査線にして数本分を抽出し（インターレースで２５６本のうちセンター１２８本目の前後数本の走査線分）、
- それを貯めて１枚のｊｐｇファイルにする、
- そのJPEG画像をMakeQTVRPanoramaの入力にして、パノラマムービーを作る、
その場合には、スリットスキャンカメラを入手し、それをカラープリントする設備を準備すればいいのでしょうけど、高価です。
そこで、
長々と分かりにくいことを書きましたが、要は、「マックで動く電子スリットスキャンソフト」をなんとか作っていただけないでしょうか？もし、そのようなソフトがあれば、
まずは、答えを先に書いてしまおう。私が作らなくても、
- NIH-Image (MacOS)
- ScionImagePC (Windows)
- 複数画像(動画)からの走査線抽出
ScionImagePCの動作画面を以下に示す。NIH-Imageとほぼ同じである。
 |
これらのソフトのStack-Slice機能を用いれば「複数画像(動画)からの走査線抽出」ができる。その使用例と、その面白い座標軸変換について考えてみたい。しかし、このページは少々重くなってきた。まして、走査線の抽出の話は使用画像が多くならざるをえない。そこで、次回、詳しく使用例を紹介することにする。よく、次回といったまま数ヶ月経つことがあるが、今回は大丈夫である。少なくとも数日後には登場することと思う(多分)。
あれっ、ここまで書いてからinfoseekで検索すると、
- パノラマ写真のひっみっつっ!
- http://www.imagica.com/nomad/sig98/hitachi/
2000-02-13[n年前へ]
■競馬の写真判定とパノラマ写真
パノラマ写真と画像処理 Part.2
前回 、
の時にi_matさんから頂いたメールを紹介した。i_matさんは- Ｉ＊ＭＡＴ The HomePage (http://www.nsknet.or.jp/~i_mat/ )
- atoz@gol.com (http://www2.gol.com/users/atoz/index.html )
さて、前回
これらのソフトのStack-Slice機能を用いれば「複数画像(動画)からの走査線抽出」ができる。その使用例と、その面白い座標軸変換について考えてみたい。と書いた。今回もまた「数日後には登場」と言った割には時間が経っているような気もする。しかし、ここのところ文字通り忙殺されていたのである。と、言い訳をしながら今回この作業をやってみることにした。しかし、このページは少々重くなってきた。まして、走査線の抽出の話は使用画像が多くならざるをえない。そこで、次回、詳しく使用例を紹介することにする。
よく、次回登場と言ったまま数ヶ月経つことがあるが、今回は大丈夫である。少なくとも数日後には登場することと思う(多分)。
まずは、
- 「複数画像(動画)からの走査線抽出」
- 「座標軸変換」
以下に示す連続の画像は競馬のゴール地点に競走馬が到着した瞬間である。「馬に見えない」という人がいたら、それは目がおかしい。誰がなんと言おうとこれは馬である。馬と鹿の区別がつかない人は馬鹿と呼ばれるが、これはとにかく馬なのである。
 視野の中に馬がもっと入ってくる。
視野の中に馬がものすごく入ってる。 |
さて、このビデオカメラで撮影された画像は例えば以下のようなものである。
 |
撮影された各時間の画像から、この画像の赤で囲んだところを抽出し、並べたらどのようになるだろうか？
それはこのようになるだろう。よくある競馬の着順判定写真である。
 |
一見、これまで眺めてきたビデオカメラで撮影された画像と同じように見えるが、全く違う。ビデオカメラの撮影画像の動画中における、複数画像間の「位置」は全く変化していない。変化しているのは「時間」だけである。
だから、このような赤い長方形の画像を並べた方向というものは「時間軸」を意味しているのである。それを、下の画像に示してみる。
 |
この画像は縦方向は「空間軸」であるが、横方向は「時間軸」なのである。ビデオカメラの画像が縦横共に「空間軸」を示しているのに対し、その一軸を「空間軸」から「時間軸」に変換したものなのである
この競馬の着順判定写真の場合、カメラは空間に固定され「時間軸に変化するもの」を撮影していた。だから、このように各画像から一部を抽出して並べると、それは「時間軸」に対する変化を示すものを得ることができる。
また、例えば実験条件を変えたときの計測画像に対して「各画像から一部を抽出して並べる」ということをするならば、それは「空間軸」x「実験条件」というものを表す画像を得ることができる。
それでは、時間的には変化しないものを、ビデオカメラで撮影する方向を変化させながら撮影したらどうなるだろうか？例えば、ビデオカメラを下のようにして360度回転させながら撮影をしてみるのである。
 |
この場合撮影画像の各画像は撮影方向角度が異なるわけである。従って、先ほどのように一部分を抽出して並べると、一方向は「空間軸」であり、もう片方の軸は「撮影方向角度」になる。結局当たり前ではあるが、ある位置から眺めた周りの景色が得られるわけだ。
これが、前回i_matさんの要望していた
- ８ミリビデオを横倒しにして、 モーター回転するヘッドでぐるりと３６０度撮影し、
- その撮影した動画ファイルの、各フレームから走査線にして数本分を抽出し（インターレースで２５６本のうちセンター１２８本目の前後数本の走査線分）、
- それを貯めて１枚のｊｐｇファイルにする、
- そのJPEG画像をMakeQTVRPanoramaの入力にして、パノラマムービーを作る、
それでは、その作業を実際にしてみようと思う。i_matさんから送って頂いた動画ファイル
を使い- 動画から静止画に変換し(走査線の狭間-1/60秒の世界を目指せ- (1999.07.08) 参照)、
- Image PC(NIH-imageをWindowsに移植したもの)で、走査線の一部を抽出し並べた静止画を作成する
もういきなり結果を出してしまおう。これが、「動画ファイルから走査線を抽出し、パノラマ写真にしたもの」である。
 |
おや？何が何だかわからない画像になってしまっている。変なモザイクがかかったみたいな画像になっているし、グレイ画像である。参考までに、先ほどの動画から手作業でパノラマ画像を作成したものを以下に示す。上の画像と比較してみると画像の示すものの対応がわかるだろう。
 |
さて、今回の実験結果が
- 変なモザイクがかかったみたいな画像になっている
- グレイ画像である
まず、
- 「グレイ画像」になっている理由
そして、「変なモザイクがかかったみたいな画像になっている」のは(動画中の)各画像から走査線をそれぞれ一本しか抽出しなかったからである。だから、横方向(カメラの撮影方向角度)のデータが足りないのである。そのため、モザイク画像のようになってしまったのである。
本来、抽出する走査線の数は、カメラの回転速度に応じて増やしてやらなければならないわけであるが、それが上手く合っていなかったのである。また、今回の画像を見て頂くと判ると思うが、動画ファイル自体も、実は一秒辺りのフレーム数が間引かれたものとなっている。それにより、抽出する走査線の数が一本ではますます足りなくなってしまっていたのである。
というわけで、今回は「失敗した」と言わざるをえない。何か、前回は「簡単である」などと言い切ったような気もするが、それはきっと気のせいであろう。
やはり、これは適当にあるもので間に合わせ仕事をしようとしたせいかもしれない。いつの日か「mov2panorama.exe」を作成し、必ずや必ずや再挑戦をするつもりである(Macでやるのは少しあきらめモード)。
2000-02-19[n年前へ]
■携帯電話の同時性？
競馬の写真判定とパノラマ写真 その後
先日
を書いてから面白いメールを頂いた。その一部を抜粋すると、小生は超音波を利用した新しい流体場測定を行っていますが、この方法で得られるDataは空間1次元時間1次元の2次元データです。従って得られるのは、このページにあったような画像が直接得られるわけです。とある。この方法といくつかの結果を発表してから、あちこちからコンタクトがありましたが、その中の一つが、NYのSirovichという高名な流体力学者からの手紙でした。彼はいわゆるSnapShotを、逆に小生のデータから構築できないか、というのです。
今このWebでされたことの逆をしたいというわけです。流れの空間構造を解析するために使いたいのです。残念ながらこれは、以下に少々説明するように、原理的に無理な話で断らざるをえませんでした。
つまり、時間軸に速度をかけて空間軸に変換できればよいのですが、流体場はそれ自身が速度分布を持っていますから、一体何を使えば良いのかが定まらない。
電磁波の場合には光速が一定ですから、時間情報から空間情報を得ることができますが、古典流体力学では不可能なのです。工学的には平均流速を使って、時間-空間の変換をしますが、それはインチキとまでは言わないまでも、便宜的なも
のでしかありません。このWEBの中での例では、馬？の速度のみであとは静止しているので、可能でし
ょう。
「馬？」という箇所に、私との意見の相違があるようだ。私が明らかに「馬」であると言い張っているものに疑問を持たれているような気がするのであるが、今回そこは気にしないでおく。
なるほど、音波や電磁波などを使って計測を行い、得られた
- 空間(あるいは量)-時間
- 空間(あるいは量)-空間
- 海の中の魚を探知する「魚群探知機」
- 気象状況を計測する「気象レーダー」
- 固体の中の電荷分布を計測する「電荷分布測定装置」
「魚群探知機」は超音波を水中に発信して、その反射波が刻々と帰ってくる様子から、(超音波の速度を用いて、空間位置に変換した後に)障害物(ここでは魚群)の様子を計測するものである。「気象レーダー」も電波を使って同様に雲の分布などを測定する。
「電荷分布測定装置」の場合は、(例えば外部電界を印加し)電荷を持つ個所を振動させてやり、その振動がセンサー部に刻々と伝わってくる様子から(あぁ、なんて大雑把な説明なんだ)、(固体中の弾性波の速度を用いて、空間位置に変換した後に)固体の中にどのように電荷分布が存在しているかを計測するものである。
と、文章だけでは何なので、WEB上から、それらの計測器を用いた場合の計測例を示してみる。
下が魚群探知機である。リンク先は
である。 |
また、この下は空間電荷測定装置である。これなども、とても面白いものだ。リンク先は
である。 |
さて、こういうことを、調べてみるだけではしょうがない。自分でもそういう計測をしてみたい。
そこで、次のような実験をしてみようとした。
- 部屋の中に複数の「音の発信源」を配置する。
- 複数の「音の発信源」から同時に音を発する。
- それをPCで収録する。
- 音声が「音の発信源」からPCに到達するまでの時間を解析する
- 複数の「音の発信源」の位置を計測する。
そこで、安易にも時報を使おうかと考えてしまった。しかも、数があって手軽ということで、携帯電話を使おうとしたのである。
しかし、複数の携帯電話を集めて、117に電話して時報を同時に聞いてみると、とても同時どころではない。てんでばらばらなのである。電話のスピーカーから流れてくる時報のタイミングには結構ズレがあるのである。
携帯電話の間には結構同時性がないのだ。また、固定電話とも比較したが、固定電話よりも時報が速いものもあれば、遅いものもあった。
そこで、複数の携帯電話を聞き比べた結果を以下に示してみたい。この写真中で左の携帯電話ほど時報が先に流れており、右になるほど時報が遅れているのである。一番早い左と、一番遅い右では一秒弱の違いがあった。
 |
また、参考までに、家の固定電話と携帯電話の時報を一緒に聞いたサウンドファイルを示しておく。
この携帯電話は先に示した画像の一番左である。つまり、先の携帯電話群では一番時報が早かったものなのである。しかし、家の電話よりは一秒弱遅かった。ということは、家の固定電話と先の一番遅い携帯電話では時報の時間にして２秒弱の違いがあることになる。 そして、「家の固定電話と携帯電話の時報を一緒に聞いた音の変化」をスペクトログラムにしたものを以下に示す。
 |
水平軸が時間軸であり、時間は左から右へ流れている。また、縦軸は音の周波数を示している。ここでは、「１」で示したのが家の固定電話の時報であり、少し遅れて「２」の携帯電話の時報が聞こえているのが見てとれる。
よく時報を確認することはあるが(実は私はほとんどないのだが...)、携帯電話・PHSで時報を聞く限り、秒の精度はそれほどないようである。また、勤務先の固定電話は先の携帯電話群と比べても遅い方であった。それは少し意外な結果であった。
今回調べた「携帯電話の同時性のなさは」は常識なのかもしれないが、電話の時報で時計を合わせるのはあまり精度が出ないやり方であることがわかっただけでもよしとしよう(別に実験を途中で投げ出した言い訳ではないけれど)。
今度、TV(衛星TVなども遅延時間を考慮した時報の放送を行っていると聞くし)やラジオを用いて当初計画していた実験を行おうと思う。その際には、時報がPCに到達する時間のズレで「音の発信源」までの距離を計測し、左右のマイクでの違いを計測することにより、「立体音感シリーズ」のように「音の方向」を得てみたい。
というわけで、話が「立体音感シリーズ」に繋がったところで、今回は終わりにしようと思う。
2001-01-21[n年前へ]
■カンバスから飛び出す「名画の世界」
作者の視点から眺めてみれば
先日、新穂高ロープウェイスキー場へ行った。雄大な景色に囲まれたとても素晴らしいスキー場だ。その景色を思わずデジカメで撮ったのが下の写真である。まずはこの「写真をじっくりと眺めて」みて欲しい。
 |
私が感じた「雄大な景色」は伝わっただろうか？ きっと私の感じた「雄大な」感じは百分の一も感じられないに違いない。それでは、次に片目をつむって、もう片方の開いた目だけでこの写真をもう一度眺めてみてもらいたい。そうすると、今度は一体どんな風に感じられるだろうか？今度は、立体的に浮かび上がる山と谷が浮かび上がってくるハズである。
この「片目で写真を眺める」というのは南伸坊の「モンガイカンの美術館」の中で書かれている「写真の見方」である。その一部分を引用してみると、
ヒトの視覚の特殊性というのは、横に並んだ二つの目が、それぞれ違った映像を感じて、それが脳ミソでかきまぜられて、立体を感じるようになっていることなのだった。私はこれを初めて読んだときは、目からウロコが落ちたような気持ちになった。それまでは、私は写真を「じっくりと眺め」ようとして、両目でじっくりと眺めてしまっていたのである。両目、すなわち、作者とは異なる視点からじっくりと眺めてしまっていたのである。写真に切り取られている景色は作者の視点・場所から描かれているのだから、その場所からじっくり眺めてみれば、もっとそこに切り取られている世界を感じることができたに違いないのだが、そこをちょっと勘違いしていたわけだ。一方、カメラというのは、もともとが片目で見た映像なのである。ファインダーをのぞいていないほうの目を、カメラマンがあけたままであっても、写ってきた写真は片目の映像には違いない。これを両目で見れば、「写真は立体を平面に置き換えたものである」という正論が見えてしまうばかりである。だから、写真を、実物からうける視覚の印象と同じように見ようとするなら、片目で見なければいけないのである。
映画のセットは撮影しているカメラの位置から見るのが正しいのであって、それ以外の位置から見ても意味がない。違う角度から見てみても、それはあまり面白くないのである。いや、もちろん映画村とかユニバーサルスタジオとかそんなのも繁盛しているくらいだから、実は裏側から見るのも面白いのだろうが、それはあくまで表から見終わった後での、「裏の眺め」なわけだ。
そういったわけで、写真を眺めるときには「(作者と同じ)片目でじっと眺める」のが良いわけであるが、それは写真だけに限らない。平面に描かれたものであればそれは何だって同じである。普通の絵画だって、版画だって、もう何でもそうだ。例えば、このモネの「散歩、日傘をさす女」を両目と片目で眺めてみよう。これはモネが家族を光り輝く景色の中で描いた名画である。
 |
両目でじっくり眺めてしまうと、いまひとつ感じられない風の感じや空気の透明感が、片目で眺めると躍動感と共にあなたの目の前に迫ってくることと思う。片目でこの画を眺めるとき、私達の目はセザンヌが「彼(モネ)は眼である。しかし、何という眼だろう。」と評したモネの目と一体化し、モネが眺めた景色を私達も眺めることができるのだ。
というわけで、写真に限らず平面に描かれたものであれば、私は片目で作者と同じ視点に立って眺めてみるのが面白いと思うわけだ。平面に描かれた写真や絵画には、作者の片方の目から見た視点しか描かれていないので、私達も同じように片目で見てやればあとは私達の想像力が作者のもう片方の視点を作りだし、作者の感じた世界を立体的に感じることができるのである。
と、そんなことを新穂高ロープウェイスキー場のリフトの上でぼぅ〜と考えていると、少し面白いことを思いついた。平面に描かれた写真や絵画には、作者の片方の目から見た視点しか描かれていないのであれば、もう一つの視点を想像して、そのもうひとつの視点から眺めた情報を絵画に加えてしまえば良いのである。
簡単に言えば、オリジナルの画に描かれている物体の距離に応じて、左右の視差をつくってやった二枚の画像を作れば良いのである。そして、その二枚の画像を左右の目で眺めてみれば、作者が同じく左右の目で眺めている景色、作者が描こうとしたものを眺めることができるかもしれない、と思ったのだ。もちろん、その処理にはいくつかの面倒なこともあるのだが、その処理の細かい内容・注意についてはまた次回以降に説明してみることにして、今回はまずはそういう処理をしてみた名画を見ていくことにしよう。
というわけで、これが作者の視点情報を勝手に加えて3D化したモネの「散歩、日傘をさす女」hirax.netEdittionである。この二枚の画像を平行法、つまり右の絵を右の目で眺めて、左の絵を左の目で眺めてみたならば、キャンバスの中で佇んでいる妻カミール・モネと息子ジーンが、キャンバスの中から浮かび上がってくるはずだ。その時、二人の背景の青い空もより深く見え、空気の透明感も流れる風が流れる時間と共に浮かび上がってくるのである。
 |  |
このThe Stroll, Camille Monet and Her Son Jean hirax.net Edittionを眺めれば、あなたもモネの視点から、彼の両目に映るカミール・モネを感じることができたことと思う。平行視が苦手な人は目の力を抜いて、ゆっくり挑戦してみてもらいた。平行法のコツはぼぅ〜と遠くを眺めるように、目の力を抜くことである。
この「散歩、日傘をさす女」は単に紙で作ったニセモノのパノラマの景色みたいに見える、という人がいるかもしれないので、次にシャガールの「窓」も同じように眺めてみよう。まずは、オリジナルの「窓」である。
 |
そして次が、作者の視点情報を勝手に加えて3D化してみたシャガールの「窓」hirax.netEdittionである。これも同じく、平行法で描かれている。シャガールが眺めている窓の向こうの景色、世界が深い奥行きと共に目の前に出現するハズである。
 |  |
さて、写真にせよ絵画にせよそれは作者の視点から世界を切り取ったものである。その「切り取る」という作業は、このシャガールの絵のタイトルではないが、"window"=「窓」そのものである。限られた「窓」によって画家の感じた世界の一部がカンバスの上に切り取られる。それは逆に言えば、カンバス上に画家の感じた世界へ開かれた「窓」が開いている、ということでもある。
もちろん、私達の視点は必ずしも作者の視点とは同じでないし、作者が世界を切り取った窓もごく限られた小さな窓だろう。だから、なかなか作者が感じた世界を共有することはできないだろう。しかし、作者の視点を想像しながら、作者の切り取ったごく限られた窓に立って外を眺めてみる時、きっとそこには描かれている世界は生き生きと見えてくるに違いないと思うのである。
2001-12-09[n年前へ]
■スキーが上手くなる方法（素直でない人向き）
とりあえず、100cm位のスキーでツインチップじゃない板（後端が丸くなってないの）を借りて、それで滑ってみるのが良いのではないか、と。
素直な人だったら、その人の滑り方をよく見て、その人に向く滑り方を教えてくれる良い先生かなぁ。そうすれば、新穂高ロープウェースキー場のパノラマコースを片足で滑り降りるくらいはできますよ、きっと。
（リンク）
」など。