Teruaki Tsubokura

kohaku_vのオススメ動画

今年のSIGGRAPHで展示されていた作品から、私のお気に入りをご紹介致します。

Recompose from Matthew Blackshaw on Vimeo.

■Recompose
Kinectを使用した3D彫刻が出来る作品。
単純に手で操作できるだけでも楽しいデバイスなのに、プロジェクションマッピングを利用することで、
操作もグラフィカルで楽しい作品になっています。
リニアモーターを使ってピンの高さを変えているみたいなのですが、このあたりの技術詳しく知りたいですね。

MoleBot: Mole in a Table from Woohun Lee on Vimeo.

■MoleBot
もぐらを表現した作品。
もぐら本体は出てきませんが、ぽこっと盛り上がる面を見てるとなんだかだんだん可愛らしく見えてきます。
動画の後半を見てもらうとわかるのですが、このもぐらを使った新感覚のゲームまでできるみたいで、
すごく面白いし、新しい表現方法だなぁと感心してしまいました。

■POCOPOCO(首都大学東京)
POCOPOCOシーケンサ。
その名の通りポコポコっとボタンが飛び出て音を創りだすことができる作品です。
完成度がとても高くそのまま商品として売りだせますよねこれ。もちろん今のままではコストが掛かり過ぎるとは思いますが。
最初はTENORI-ONっぽいなぁと思いましたが、やっぱり物理フィードバックがある作品は楽しいですし、
ポコポコ飛び出る作品を見ているだけでも飽きないですね。

■InteractiveTop(電気通信大学小池研究室)
コマを使った作品とは、日本人ならでは発想ですよね。
コマがぶつかり合うと派手な音やエフェクトが出るという、
まさにアニメの中のベイブレードを具現化したような作品です。
コマの回転速度もコマの隣に表示されるみたいですね。ライフ表示みたいで面白い。
技術的にはコマの下部に取り付けられた4つの赤外線LEDを台のしたの高速赤外線カメラが撮影しているようです。
さらに赤外線の部分と、台に偏光版がはられていて、高速に回転するコマほど早く点滅するようにカメラに映るようです。
そして、手に持っているコマ回し機?みたいなのを近づけると回転速度を上げたり、コマを誘導したりできるようです。
偏光板で回転数を取得するとか、回ってるコマの回転数を上げるとか、発想がすばらしい。
またお気に入りの作品が増えたら紹介していくことにします。お楽しみに。

かなざわ燈涼会でメディアアートの展示を行いました


7月29日~31日に金沢ひがし茶屋街で行われた「かなざわ燈涼会(http://touryoue.jp/)」というお祭り内で、29日と30日の2日間、金沢の伝統的な町並みを燈籠に見立てたメディアアート「町家燈籠」を展示致しました。
各町家のオーナーさんにご協力頂きまして、東茶屋街の中の12カ所で映像コンテンツを町家の障子や、床などに投影致しました。
制作を行ったのは金沢で発足したクリエイティブ集団「U-moa


メンバー全体では20人近く(一応)いますが、今回のメディアアートに関わったのはそのうちの8人です。
それぞれのメンバーが自分の担当の町家で投影する作品を制作致しました。
そんな中、私が制作したのが名付けて・・・
石畳燈籠

せっかく金沢の伝統的な町並みがあるので、もとからある「石畳」を使ってアートにできないか。と考えて始まったのがこの作品です。
来場者の方に楽しんで頂く為に、近づくと石畳の枠が光り、上に乗ると音と共に石畳の面が光るというインタラクションを取り入れました。

大変多くの来場者の方に体験して頂き、老若男女問わず皆様に楽しんで頂けたようで、人が人を呼び、常に人だかりができているような状態でした。
さらに道を歩けば誰でもモデルになったかのように写真をみんなが撮っていました。
技術的には、Kinectセンサー2台を使用して人の位置を奥行きで取得して、プロジェクター2台を使用し「プロジェクションマッピング」という表現方法を用いて石畳に映像を重ね合わせて投影しています。


こんな感じでKinectとプロジェクターとPCのセットを2つ並べて使っています。
設置台はスチールラックと100円均一で買い集めた材料のみで作りました(笑)
キャリブレーションはマウスで石畳に合わせてひとつずつポイントを打ちながら石畳オブジェクトを実際の世界に合わせていきます。なかなかこの作業が大変でしたが、リアルとデジタル空間がぴったり重なったときは感動しました。
また、東京工芸大学のアーティストさん達が今回の「町家燈籠」をわざわざ見に来て下さったようで、Kinectを使ったプロジェクションマッピングの仕方など、色々お話させて頂きました。
遠くからわざわざ見に来てくれるなんてとっても嬉しいですね!
イベント全体としての感想は、金沢ひがし茶屋街という伝統的な町並みの中、お祭りという沢山のお客さんの目にふれる場所で展示でき、さらに沢山の来場者の方や町家のオーナーさん・芸子さん達にも「凄く面白かったです」というような感想を頂沢山けたので、大満足です。
中でも、2~3歳くらいの本当に小さい子が、よほど気に入ったのか石畳の上で必死で体を動かして遊んでくれているのを見て、制作者としては本当に嬉しくて涙が出そうになりました。。。
これがインタラクティブアートの醍醐味ですよね。これだから作品展示はやめられない!
これからも沢山作品を作って色んな場所で作品展示を行っていきたいです!

Kinect for Windows SDKのセミナーに行ってきた日記

2011年7月11日、日本マイクロソフト本社で行われた、
[Tech Fielders セミナー 東京] < Kinect for Windows SDK をつかおう!>
に参加してきましたので、日記も兼ねてレポートを書いていきます。
このセミナーとても注目されていたみたいで、募集開始後数日で定員に達していました。
そんな中、運良く応募が間に合ったので、この日は平日で仕事もあったのですが、有給休暇を消費して行く事にしました。
前日の夜に金沢から夜行バスで出発して、東京駅に朝7時頃到着。
セミナーのスタートは13時半からだったので、その前に色々見て回ろうと思ってましたが、
ちょっと早すぎてどこも開いてませんでした・・・汗
ってことで、カフェを3件近く回って最終的にロッテリアのPCスペースでノマドワーク!

openFrameworksでメディアアートの作品作りをしばらくしてました。
そして良い時間になったのでまずは、有楽町の「ソニービル」を見に行く事に。

ソニービル自体は始めて行ったのですが、平日だったので人も少なくてとても快適でした。
PlayStation Moveを使った3Dゲームも体験させてもらったり、デジタル一眼レフの撮影体験をさせてもらったり、デジモノ好きにはなかなか楽しい空間でした。

そうやって楽しんでいる内にKinectSDKセミナーの始まる時間が近づいてきたので、品川へ移動。
品川駅はデジタルサイネージに力を入れているみたいで、ものすごい数のディスプレイがあった。

そしてものすごいオフィスビル群を抜けて、

日本マイクロソフト本社へ到着!

さすがの超一流企業にすこし身震い。

そして超綺麗な社内を進み、セミナールームに入ると・・・
「Wiiリモコンプログラミング」の著者でもある、神奈川工科大学の小坂先生と白井先生と再会。
こんなところで打ち合わせ無しに再会してしまうなんて、やっぱり世間は狭いですw
そしていよいよセミナー開始。
新しいKinectを使ったXboxのゲームの紹介の後、Kinect本体のハードウェア詳細の説明。
その後、Kinect for WindowsSDKの仕様等を参加者も実際に体を動かしながら体験したり、メソッドの宣言の仕方、使い方など具体的な説明がありました。
↓ユーザインデックスを何人まで取得できるか実験中

ここでのポイントをまとめると・・・

・C++およびC#で使用できる
・複数台接続できる(が、現状は2台目以降はWebカメラとしてしか機能しない)
・取得範囲は850mm~4000mm
・ボーンを取得できる最大数は2人
・ユーザインデックスを取得できる最大数は6人
・4つのマイクにより音源の位置追跡ができる(ビームフォーミングという技術らしい)

だいたいこんなもんかな?
Kinect for Windows SDKはボーン取得については他のSDKに比べて精度が高く、└(^o^)┘←こんなポーズも取らなくていいのは魅力的ですね。
あと、取得範囲はopenNIの方が300mm~10000mmと圧倒的に広いので、このあたりの制限はちょっときになりますね。
あとライセンスについての話も出ました、マイクロソフトの方がおっしゃっていた事をまとめると・・・

・Kinect for Windows SDKで作ったソフトウェアを販売する事は 不可
・作ったソフトウェアを無償で配布する事は (ただしランタイムの再配布は不可)
・作ったソフトウェアの有償デモ体験 
・企業等での有償セミナーを開く 
・Kinect for Windows SDKの本を書いて販売する事は 

とのことでしたが、これはマイクロソフトが公式に発表しているものではないので、使用に関しては個人の責任で行うように、ということでした。
SDKがまだBeta版という事もあり、かなりグレーゾーンです。

途中休憩のあと、富士ソフトさんのPALROっていうロボットが出てきて、プレゼン中のお兄さんとおしゃべりしたり、お兄さんの真似をしながらラジオ体操したりしてすごく可愛かった。

↑PALROラジオ体操中
その後、セカンドファクトリーさんからのNUIについてのプレゼンがありました。
Kinectを使ったスワイプジェスチャーを実装したみたいですが、スワイプジェスチャーは人が手を振った後の意識しない「戻り動作」をキャッチしてしまうので色々課題があるようです。その辺りの回避方法もいくつか例を出されていました。
個人的にはこのプレゼンが資料も綺麗でナチュラルユーザインターフェースの考え方についてすごく勉強になったと感じました。
セミナーを終えて。
さすがのマイクロソフト公式のセミナーだけあって、内容の濃いセミナーで大満足でした。
やっぱり勉強会に参加すると様々なすごい方々との繋がりが増えるのが楽しいです。
今回は「KINECTセンサープログラミング」の著者の中村さんもいらしていて、実際にお話できたのが嬉しかったです。
セミナー後は神奈川工科大学の小坂先生&白井先生と、石川工業大学の越野先生とお食事をご一緒させて頂いて、すごい刺激的なお話を沢山聞けたのであっという間に時間が過ぎてしまいました。
今回は仕事休んでまでセミナーに参加して本当に正解でした。
こんな楽しい体験がしょっちゅうできる事考えたら、東京に住んだ方がいいのかな。と、ちょっと思ってしまいました。

Visual Jockey

by Teruaki Tsubokura 2 Comments

■VJ(Visual Jockey)
VJは「Visual Jockey」の略で、DJが音楽をMixして流すように、映像をリアルタイムでMix(もしくは生成)してイベントで流す役です。
主にDJのプレイを演出し盛り上げる、照明さんと同じような裏方ですね。
-----
私がVJを初めて8か月が経ちますが、今まで17のイベントに出演してきました。平均したら月2回以上になりますねー。
そんなにたくさんイベントに出てきたのに、今まで自分のVJプレイ映像って今までちゃんと残した事がなかったんです。
・・・が、この間の5月7日(土)に出演したLow Pitch × 80KIDZ “Weekend Warrior” Release Tour @ MANIERでは、イベントがイベントだけにちゃーんと映像を残して頂いてたみたいです
↓こちらがその映像。この日はVJは2人で同時にやってました。

80KIDZという有名アーティストのリリースツアー最終日ということで当日は入場制限がかかるほどの多くのお客さんが来てくださいました。80KIDZさまさまです!
イベントの写真を撮っていただいていた方のブログで当日の雰囲気がわかると思います
http://ameblo.jp/camelife-org/entry-10890849829.html

自分のVJプレイ映像ちゃんと見るのも初めてなので少し恥ずかしいけど、やっぱりVJやってて映像が音楽の雰囲気と完璧にシンクロした時は最高に楽しいですね。もっとレベルアップして行きたいです!
最近はプログラミングVJに転向すべく、openFrameworksでVJのプログラムをいじったりしてます。
目指すは来場者参加型VJですね!

4月9日(土)の日本テレビ「世界一受けたい授業×熱中時代スペシャル」で、感覚をだますメディアアート「Shadow touch!!」が紹介されます。

世界一受けたい授業
4月9日(土)放送の、日本テレビ「世界一受けたい授業×熱中時代スペシャル」で、
第14回文化庁メディア芸術祭でも出展し、第16回学生CGコンテスト インタラクティブ部門でも
優秀賞を頂いている感覚をだますメディアアート「Shadow touch!!」が紹介されます。
第14回文化庁メディア芸術祭で出展した事でDigInfoTV様で記事にして頂き、それによって日本テレビ様から今回のお話を頂きました。
紹介は、6時限目 東北大学 長神風二先生の授業で、先生に紹介をして頂きます。
2時間スペシャルの6限目ですので、結構ラストの方です。
私がアドバイザーとしてお世話になっている、金沢工業専門学校 小坂研究室の、「口臭を用いた吹き矢型デバイス ラフレ」も登場し、くりぃむしちゅー 有田さん、船越英一郎さんにプレイして頂きますのでどうぞご覧ください!
-----
放送日
 4月9日(日)19:00 ~ 21:00
放送局
 NTV 『世界一受けたい授業×熱中時代スペシャル』
出演者
 
 堺正章、くりぃむしちゅー上田晋也 有田哲平、オリエンタルラジオ、船越英一郎、松下奈緒、我が家、千原ジュニア、SHIHO、佐藤隆太、里田まい、大野拓朗、さくらまや
講師
 多胡輝、武田鉄矢、下野六太、滝川洋二、阿部絢子、長神風二

「Shadow touch!!」が DigInfo TV に掲載されました。

六本木の国立新美術館で行われている第14回文化庁メディア芸術祭ですが、
2月1日に行われた内覧会でDigInfo様の取材を受けました。
なんだかいい感じの記事と動画になっています。
その記事がこちら。
DigInfo TV – 感覚をだますメディアアート「Shadow touch!!」
さらにYoutubeに日本語と英語で動画がアップされています。
【日本語】
感覚をだますメディアアート「Shadow touch!!」 : DigInfo

【英語】
Shadow Touch! – Media art that fools the senses : DigInfo

DigInfo様で取り上げて頂いてから沢山の人に見て頂けている様で、動画が投稿されて3日ほどで3万再生とすごい勢いになってます。
twitterやblog等でも沢山取り上げていただきまして、本当に嬉しい限りです!
実はこれがメディアアートをやるのは初めてでした。でもこんな反響があるとメディアアートにハマってしまいそうですね!
これからもShadow touch!!をベースに開発を続けるか、それとも全く新しい作品を作るか決まってませんがこれからも制作活動を続けて行きます。

第14回文化庁メディア芸術祭に出展します 2月2日~13日

以前の記事にも書きましたが、学生CGコンテストというメディアコンテストで受賞したので(http://www.cgarts.or.jp/scg/2010/prize/int_p2/index.html
六本木の国立新美術館で行われる第14回文化庁メディア芸術祭で作品展示をする為に只今六本木に来ています。
2624213_973518621_136large.jpg2624213_973518628_87large.jpg
昨日は設営を行い、本日は内覧会がありました。
いよいよ明日2月2日から第14回文化庁メディア芸術祭が始まります。
展示ブースを一通り見てきましたが、かなりすごかったです。
文化庁メディア芸術祭はプロの方々も応募されるので、映像作品上映会では「劇場版マクロスF」とか「涼宮ハルヒの消失」なども上映されます。
ゲームでは「Newスーパーマリオ」を初めとするPS3・Wii・DS・PSPなどのゲームがプレイできる状態でたくさん展示されていました。
2624213_975074514_222large.jpg2624213_973518613_104large.jpg
その第14回文化庁メディア芸術祭の学生CGコンテストのエリアで、影を掴むインタラクティブアート「Shadow touch!!」を展示しています。
しかも贅沢に個室を用意して頂きました(゜∀゜)
入場料無料とのことなので、東京に居る方で興味のある方は是非見に来てください。
見に来れない方も期間中こちらで、USTREAM配信しているようなので良ければどうぞ↓
http://plaza.map-staff.jp/ust/index.html
第14回メディア芸術祭
2011年2月2日 ~ 2月13日 ※火曜日休館日
10:00~18:00
東京港区六本木
国立新美術館
観覧料無料
http://plaza.bunka.go.jp/festival/

第16回学生CGコンテストで「Shadow touch!!」が優秀賞を受賞

CG-ARTS協会主催の第16回学生CGコンテストの受賞作品が公式ホームページ上で発表されました。
私が応募していた「Shadow touch!!」もなんと【インタラクティブ部門】
【優秀賞】
を頂くことができました!
shadow03.jpg
■第16回学生CGコンテスト 「Shadow touch!!」
http://www.cgarts.or.jp/scg/2010/prize/int_p2/index.html
今年は合計1221作品の応募があったようで、その中から【静止画部門】【動画部門】【インタラクティブ部門】の各部門で、最優秀賞1作品・優秀賞3作品・エンターテイメント賞3作品・奨励賞2作品が選ばれるということで、その限られたわずかな作品に選ばれたということでとても嬉しく思っています。
今までメディアコンテストにはいくつか作品を応募しましたが、賞を頂くのはこれが始めてです。
自分の興味のある事、面白いと思う事だけをやってきた訳ですが、それが始めて他の人に認められたので自分がやってきた事は無駄じゃなかったんだなと、やっと実感することができました。
でも、他の受賞作品を見ているとどれもレベルが高くて、そのまま製品として売れるんじゃないかと思う作品ばかりだったので、正直、自分の手作り感あふれる低クオリティの作品がここに並んでていいのかと心配になります(笑)
他にも、i-tokyo/IVRCで出展されていた知り合いの方も一緒に受賞されていました。
ダンス×メディアアートをやられてる方で、私もダンサーとしても研究者としても尊敬してる方の作品です。
■第16回学生CGコンテスト 「Lighting Choreographer」
http://www.cgarts.or.jp/scg/2010/prize/int_p6/index.html
また、このコンテストの受賞作品展が、2011年2月2日(水)~2月13(日)の間に国立新美術館で行われます。
今年の受賞作品を実際に見られるチャンスなので皆様是非お越し下さい。
■第16回学生CGコンテスト 受賞作品展(第14回文化庁メディア芸術祭協賛事業)
【日時】2011年2月2日(水)~2月13(日)
【場所】国立新美術館(東京港区六本木)
もしかしたら大勢の前でプレゼンしなきゃいけないかもしれないらしいので今から緊張してます(汗
オブジェクト出しすぎると強制終了してしまうバグも治ってないし、壊れかけの機材の作り直しもしないといけないし、でも毎日仕事もあるし……大変だー!
ーーーーーーーーーーーーーーーーーーーーーーーーーーーーーーーーーーーーーーーー
※追記
金沢工業大学のホームページのNewsに掲載されました!
■金沢工業大学ホームページ
http://www.kitnet.jp/news/index.cgi/id/00495/
私がアドバイザをさせて頂いている金沢工業高等専門学校 小坂研究室のホームページにも掲載されました!
■Kosaka Laboratory
http://www.kosaka-lab.com/kosaka_laboratory/2010/12/cgshadow-touch.php

次世代デバイス Kinectまとめ

by Teruaki Tsubokura 0 Comments

Kinect
Xbox360用モーションコントローラー Kinectが日本で発売されてから3週間が経ちました。
Kinectはコントローラーや装置を一切身に付けず、体だけで操作ができるようになるモーションコントローラーで、Xbox360用にMicrosoftが開発したデバイスですが、内蔵されたセンサ類によってプレイヤーの3次元的な位置の取得声&顔認識、さらには体勢のトラッキングまでできてしまう夢のようなデバイスです。
USB接続ということもありPCに接続して操作のできるドライバがユーザーによって開発されてオープンソースで公開されているので、15000円ほどで誰でも最新の技術を使って開発ができてしまいます。
今では世界中でKinectの様々な使い方が開拓されていますので、私の気になった物の一部をご紹介させていただきます。

IVRC/i-Tokyo 2010 「Shadow touch!!」出展してきました。

IMG_0216.jpg
-日本未来科学館
いやー行ってきましたよ IVRC/i-Tokyo 2010!
8月24日~25日に東京お台場にある日本科学未来館で行われたインタラクティブ東京2010というイベントに出展してきました。
同時開催のIVRC(国際学生対抗バーチャルリアリティコンテスト)も同じ会場で行われていたのでたくさんの作品が展示されていました。
バーチャルリアリティの分野ではおそらく日本一の祭典だと思います。バーチャルリアリティ学会のお偉い方々がたくさんいらっしゃいました。
私は大学の卒業研究の「Shadow touch!!」を金沢工大学園の支援を頂いて出展していたのですが、個人での出展だったので搬入作業などの準備が大変でした・・・。
イベントの前日23日に搬入・設置作業を行うということでその前日22日から東京へ移動しておけばよかったのですが、22日はダンスの大きなイベントがあり、夜まで拘束されてしまったので23日の深夜0時に石川県をマイカーで出発して12時間かけて(休憩込み)東京まで運転して行くことになりました。
片道
ガソリン代5000円 + 高速代約12000円・・・・・・移動費orz
23日の12時頃に日本未来科学館へ到着。搬入・設置作業を行いました。
IMG_0177.jpg
あ、ちゃんとShadow touch!!が載ってるー。わーい。
IMG_0174.jpg IMG_0175.jpg
この日は作品の搬入・設置をして出展者や関係者で内覧会と懇親会が行われました。
IMG_0191.jpg
-Shadow touch!!設置完了
色んな大学生や大学院生とお話できて刺激的でした。
IMG_0189.jpg
-内覧会
びっくりしたのは私と同じダンサーの研究者(しかも同じブレイクダンサー)が居た事。話が会いすぎてめちゃめちゃ面白かったです。研究もダンスとインタラクティブ技術を組み合わせたもので興味をひかれました。
内覧会&懇親会も終わり、この日は東京にいる高校時代のお友達と飲んで、未来館近くの大江戸温泉物語ってところで温泉入って寝ました。
IMG_0212.jpg
-大江戸温泉物語の中
そして2日間 IVRC/i-Tokyo が行われた訳ですが、詳しく覚えていませんがたぶん自分のブースだけでも300~400人くらいは体験していただいたんじゃないかと思います。
「Shadow touch!!」もなかなか好評で、ほとんどのお客さんが懐中電灯に仕掛けがあることに気づかずに普通の懐中電灯だと勘違いして「え?何で?何で???」ってなってました(笑
Wiiリモコンを懐中電灯形にしたのは成功でしたね。良く見ると懐中電灯を向けている方向と実際に明るくなる場所にはズレがあるんですが、手の動きに合わせて光の位置が動くのであまり気づかないようです。
Laval Virtual(バーチャルリアリティのフランス大会)の方もいらっしゃいまして、大変気に入って頂けたのか、Laval Virtualで是非出して欲しいと言われたので、めちゃめちゃ嬉しかったです^^
でも、フランス語どころか英語も喋れないし、なにしろフランス行く資金が無いのでLaval Virtualに出すかはまだわかりません。
たくさんのお客さんに体験していただいて、その場で意見が聞けたのはすごく為になりました。
 「触覚のフィードバックが欲しい。」
 「平面でやるのはもったいない。色んな障害物がある場所で色んな影の出方を楽しみたい。」
 「複数人で楽しみたい。」
 「音が欲しい。」
 「Wiiリモコンじゃなくて、赤外線カメラを使ってもっと数を増やせば精度が上がるのでは?」

・・・等の意見が多く、今後の参考になりそうです。
年齢層としては、第一に子供たちの食いつきがとても良かったです。しまいには子供たちが群がってきて懐中電灯や反射キャップの取り合いになる始末w
次に私と同じくらいの20才前後の男女。カップルでいらっしゃってる方も多く、彼氏さんが懐中電灯で影を探して彼女さんが影を触って楽しむ光景が印象的でした。
中でも驚いたのは、「これ見たことあります!」っていう人が意外に多かった事。
youtubeやニコ動で動画上げてはいたのですが、やっぱりこういうイベントに来る方は見てくださってるんだなぁと嬉しく思いました。
しかも、子供たちが「すげぇ!これ未来のゲームや!」って言ってくれたり、この分野で超有名な方とかが「twitterで知って見に来ました。」って声をかけてくださったりしてテンション上がりっぱなしでした。
今回インタラクティブ東京2010に出展して、本当にたくさん得るものがありました。
忙しくて準備時間をあまり取ることができず、前回石川コンテンツマーケットで出展した時とほとんど改善できませんでしたが、それでも今回出展することができて良かったです。
これからもこのShadow touch!!かそれとも新しい作品か分かりませんが、i-Tokyo,SIGGRAPH,Laval Virtual,文化庁メディア芸術祭など沢山のメディアイベントがあるので、これからも挑戦を続けて行きたいと思います。
長くなってしまいましたが、ここからは他の方の作品を一部ご紹介させていただきます。
こちらからどうぞ↓↓