【IT】紙や本など実世界にあるものを指で直接選択するだけでデータのやり取りを可能にする次世代ユーザーインターフェース−富士通

実世界の物に対してタッチ操作可能な次世代ユーザーインターフェース

http://www.youtube.com/watch?feature=player_embedded&v=npZ3_ILHVzs

富士通研究所は、紙や本など実世界にあるものを指で直接選択するだけでデータのやり取りを可能にするシステムを
開発しました。

"紙やいろいろな物がタッチパネルのように触って操作ができると考えています。この装置は、特別なハードウェアは一切
使っていなくて、通常のウェブカメラ相当のものと市販のプロジェクターのみで構成して、画像処理の技術を使ってこの
機能を実現しています。"

この技術を用いることで、書類を指でなぞって必要な箇所を電子データとして取り込むことができます。

操作対象となる実世界の物体の形状を計測し、カメラとプロジェクターと実世界の3つの座標系を自動で調整する
技術により、テーブルや紙など平坦な面だけでなく、厚みのある本などの歪んだ面であってもタッチと表示を正確に
合わせることが可能です。

"今までの手の動きを使ったジェスチャー操作は、ジェスチャーでパソコンやいろいろな機器を操作するといったものが
多かったと思いますが、こちらはパソコンの操作をするものではなくて、直接実際のものに触って、その物とICTの機器を
融合させようというインターフェースになっています。"

"通常のテーブルの上でのアナログ的な操作の時には反応しないようにしています。1本指を出すと操作が可能になり
ます。ということで、アナログの作業とデジタル機器への操作を融合させるようなインターフェースになっています。"

正確なタッチの検出には指先の高さを正確に検出する必要があります。特に今回使っているカメラ(320x180)では、
指先の検出が1画素ずれるだけで、高さが1cm変化してしまうため、精度の高い指先認識技術が必要です。

"低解像度のWebカメラを使っていて画像が粗いんですが、それを画像処理で補間することで高精度な3次元位置を
計算しています。"

また、周囲の環境光に応じた色や明るさの制御と手の色の個人差を補正する技術により、環境や個人差の影響の
少ない安定した手指の抽出を実現しています。

さらにタッチを用いない空間でのジェスチャー操作も可能です。このデモでは、握った状態の手を動かすと3次元CAD
データの視点を操作できます。このような既存のジェスチャー操作と今回のタッチ操作を組み合わせたようなアプリ
ケーションも考えられます。

"例えば旅行会社のカウンターであったり、役所などで申請書を書くような場所で詳しい情報を表示したりといった
用途があるかなと思います。"

"2014年度の製品化をめどに開発を行っています。まだデモンストレーションレベルで実際の現場で使って頂いて
いないので、現場の方々に実際に使って頂いて課題を抽出してユーザビリティの評価を行って、この装置に反映して
いきたいと思っています。"

Don Kennedy and Ryo Osuga/Diginfo TV 15 April 2013
http://jp.diginfo.tv/v/13-0025-r-jp.php

関連ニュース
【IT】『マイノリティ・リポート』風のジェスチャー入力システム「Leap Motion」、市販へ ASUS社の一部コンピューターにバンドル 画像あり
http://anago.2ch.net/test/read.cgi/wildplus/1357563755/-100
【AV/車】手をかざすと画面が切り替わる--パイオニア、新機能『エアージェスチャー』搭載ナビを発売 画像あり
http://anago.2ch.net/test/read.cgi/bizplus/1349184513/-100
【技術】念じるだけで家電を思いのままに動かす「ブレーン・マシン・インターフェース」の家を公開…成功率は今のところ7〜8割 /京都 画像あり
http://anago.2ch.net/test/read.cgi/scienceplus/1352335576/-100

これで自炊が捗るな

指の位置で本の何ページの何行目か抽出出来るようだ

操作にはトランプが何枚あるかが分るマジシャン並の器用さが必要だな

富士通は技術はあるけど
UIのセンスがOASYS以来の伝統で
独特だからなあ

MITあたりで既にやられてそうだが、独自発想なら凄いな

技術自体は大したことないが発想がいいな。

これ凄く欲しいなぁ。いくらくらいすんだろ

便利なんだろうけどさ、無駄にエネルギーを使うことにならないかな
選択に使う労力くらいは、（現状での）人間が分担したままでいいと思うが

このプロジェクターをグーグルグラス的なヘッドマウントディスプレーのサイズに縮小一体化できれば便利すぎるな。

>>7
中身はプロジェクターとWebカメラだから、１０万もしないんじゃないか？

ヘルス嬢のまんこを指でなぞると勤務日が登録されるとかか

子供と宇宙人が出てくる映画ETCを思い出した

【IT】富士通研究所、"手のひらを押したり引いたりする動作"でPCなどの画面を操る技術を開発 [05/20]
http://anago.2ch.net/test/read.cgi/bizplus/1369009260/
【PC】東芝、"ハンドジェスチャ機能"搭載のAVデスクトップPC発表--Webカメラに向かって、手のひらを動かすとクリック [05/20]
http://anago.2ch.net/test/read.cgi/bizplus/1369020784/

【技術】動くものにもブレずに映像投影…東大が技術開発［13/05/15］
http://anago.2ch.net/test/read.cgi/bizplus/1368668395/