Civil Engineer's Forum-FORUM8
このページをスタートページに設定する QR

Facebook - FORUM8

Twitter - FORUM8

YouTube - FORUM8

 サイトマップ | ご利用条件 | お問い合わせ | 英語翻訳サイト | Japanese | English | Korean | CHS/CHT | Vietnam | Francais | Europe

Home Back
 

赤外線深度センサ、脳波計を用いた“ジェスチャドライビング研究システム”

   ジェスチャドライビングシミュレーション
UC-win/Road 製品ページ
UC-win/Road 製品情報
UC-win/Road Drive Simulator
UC-win/Road ドライブ・シミュレータ
UC-win/Road 体験シミュレータ
UC-win/Road 体験シミュレータ
製品詳細

Mind&VR UC-win/Road for MindWave Mobile  Kinect™ドライビングシミュレータ

  Mind&VR UC-win/Road for MindWave Mobile
ライン
脳波計測装置MindWave MobileによるUC-win/Roadでのドライブシミュレーション

●背景
従来、人間とコンピュータとが相互作用する装置では、キーボード・マウス・ジョイスティック・3Dマウスなど、入力時の機能が制限されていました。現在は、ゲームなどでジェスチャーによる入力方法が可能になってきています。任天堂 WiiやPlayStation Move、Microsoft Kinect™などでは、専用の装置を使用せずにゲームと人間との相互作用が可能です。このような背景で、車あるいはロボットの操作といった高レベルのタスクを行うため、EEGベースの装置を開発しています。

●ハンドルレスコントロールの研究
MindWave Mobile(開発元:NeuroSky)は、脳波センサが搭載されたワイヤレスのステレオヘッドデバイス。
装着することで、アルファ、ベータなど周波数の違いによって分類される脳波を計測し、独自のアルゴリズムにより集中度・リラックス度等の心理状態へと変換。
MindWave MobileプラグインによりVRデータと連携し、これらの取得データを利用した操作・シミュレーションが可能。左図の運転シミュレーションでは集中度によって速度を制御し、画面の1点を凝視する等で集中すれば速くなり、注意散漫な状態になれば遅くなります。
▲MindWave Mobile(Neurosky) ▲“脳波ビジュアライザー”(Neurosky)

●活用事例
脳波ドライビング 〜脳波で運転!〜 UC-win/Road MindWave Mobile プラグイン
MindWave Mobileを頭に装着し、接続している状態で運転シミュレーションを開始すると、脳波による走行が可能。
脳波で自車両のアクセルとブレーキをコントロール。

F1レース
EEGテクノロジーの活用事例として、フォーミュラ・ワン(F1)レースが挙げられます。ゲームをさらに面白くするため、2人のプレーヤが競争できるようになっています。このため、2つのMindSetユニットをリアルタイム(@60Hz)に読み込み(図1)、メディテーション係数とアテンション係数を抽出できるインターフェースを開発しました。

これは、米国アリゾナ州のフェニックスストリートサーキットで開催される予定であったF1レースを仮想したVRデータです(図2)。サーバとして機能したインタフェースにより、2 人のプレーヤが別々のマシンでレースを行います。

車の加速はアテンション・パラメータで制御され、使用者が集中すると車の動きが加速する仕組みになっています。最初の実験では、ブレーキをかけるより加速する方が容易であり、前もってトレーニングを行わなければ両方の制御は難しいようです。

フォーラムイエイトでは、脳波などの生体情報を活用した研究システムをご提案しています。
▲図1 2つのMindSetユニット(左右)から読み込み、
各ユニットのメディテーション係数と
アテンション係数を抽出(赤と緑の階調)

 
▲図2 フェニックスF1サーキット   ▲図3 ゲーム性もあり、展示システムとして好評 
Page Top Page Top

  Kinect™ドライビングシミュレータ
ライン
赤外線深度センサによるハンドレスドライビングシミュレーション

Kinect™の前でステアリングを操作するように両手を動かすことでUC-win/Roadの運転操作が行えるシステム。
Kinect™が検出したドライバーの両手の位置情報を車のステアリング、アクセル、ブレーキに変換。


●Kinect™ センサーとは

Kinect™センサー(以下、キネクト)は、Microsoft社販売の家庭用ゲーム機「Xbox360(R)」の周辺機器としても用いられ、コントローラーを用いることなく身体の動き、ジェスチャー、音声などによる操作を可能とするデバイスです。カメラやセンサーが搭載されており、キネクトの前にプレイヤーが立つと自動的にプレイヤーが認識されるようになっています。
この技術は研究開発会社、プライムセンス社が開発した距離カメラテクノロジーをベースとしており、センサーにはVGAカメラ、3Dスキャナー、4つのマイク、傾斜モーターなどの基部が含まれています。3Dスキャナは点パターンを連続的に与える赤外線レーザー(周波数は赤信号より少し低い)で構成されています。レーザーは人間の目には見えませんが(波長は約780nm)、暗視カメラで検知できます(図1a・1b)。
▲図1a キネクトセンサーの暗視モード画像 ▲図1b 壁に投影した点パターンの拡大ビュー

赤外線カメラによってセンサーと点との距離を予測し、周辺環境の深度図を作成します。図2はそれぞれカメラ出力(図2a)、深度図(図2b)、合成図(図2c)を示しています。

▼図2 カメラフィードに与えられた周辺環境の深度図
▲図2a VGA カメラ出力 ▲図2b 周辺環境の深度図 ▲図2c カメラ出力と深度図

 キネクトには以下のような機能があります。
  • モーションキャプチャ(最大6人まで)とジェスチャー認識機能。ジェスチャーでインタフェースを制御可能
  • 表情認識機能。ユーザを選択し過去に保存した設定を自動選択
  • 声認識機能。ボイスコマンドの実行
  • 回転ベース。最適トラッキングに合わせてセンサー傾斜角を調節


●Kinect™による車輌制御と運転操作イメージ

UC-win/Roadと連携させることで、手を動かすだけで、「仮想ハンドル」を握ったドライブシミュレーション体験が可能。 実際の運転と非常に近い自然な状態を保てる。

  • ステアリング操作(ニュートラル状態からの右折・左折)
    アクセル、ブレーキの操作はKinect™から両手までの距離を基に求めており、ニュートラル状態から前後に動かすことで操作する。両手を実際のステアリングと同じように回転させることでステアリング操作が行える。実際の車と同様に腕を回転させ右折・左折が可能。

  • アクセル操作
    ニュートラル状態から両手を前に突き出すことで行う。アクセル量は前に突き出す距離が長いほど大きくなる。

  • ブレーキ操作
    ブレーキ操作はニュートラル状態から両手を手前に引くことで行う。ブレーキ量は手前に引く距離が長いほど大きくなる。

  • ハンドルの舵角の向きと量の検出
    前に突き出した右手拳と左手拳の位置関係から、右折、左折の向きと、舵角をアナログ値として検出します。
    検出量を緑色から赤色に変化するバーとして表示します。赤くなるほど、制御量が多いことを意味します。
    ▲直進 ▲右折:右に切るほど、
    右方に赤いバーが伸びる
    ▲左折:左に切るほど、
    左方に赤いバーが伸びる

  • アクセルとブレーキの識別
    右足つま先の、左右に開く角度の検出により行います。
    ▲アクセルポジション ▲ブレーキポジション

  • アクセル、ブレーキの踏込量の検出
    ●アクセル
    アクセルの踏込量をつま先の位置からアナログ値として検出します。アクセルの場合、検出結果が上向きに表示されます。

    ●ブレーキ
    ブレーキの踏込量をつま先の位置からアナログ値として検出します。ブレーキの場合、検出結果が下向きに表示されます。
Page Top Page Top
  関連情報
ムービー掲載
YouTube AirDriving & UC-win/Road システム紹介・実演ムービー ('12.02.13掲載)
YouTube AirDriving & RoboCar® システム紹介・実演ムービー ('12.01.06掲載)
YouTube 東京ゲームショウ2011出展
6Kサイネージ・リアルタイムVR UC-win Road Air Driving 実演ムービー('11.09.29掲載)

関連製品

ハードウェアインフォメーション

新製品紹介
Page Top Page Top

FORUM8


お問合せ窓口




[ ユーザー紹介 ]
櫻井工業株式会社
株式会社TEAM IWAKIRI PRODUCTS
[ 開催報告 ]
第17回FORUM8デザインフェスティバル






>> 製品総合カタログ


>> プレミアム会員サービス
>> ファイナンシャルサポート

最近リリースした製品
3次元鋼管矢板基礎の設計計算(部分係数法・H29道示対応) Ver.4
UC-1・UC-1 Cloud 統合版 BOXカルバート
電子納品支援ツール Ver.17
柔構造樋門の設計・3D配筋 Ver.17
建築杭基礎の設計計算 Ver.10

キャンペーン実施中
地方創生・国土強靭化 FORUM8セミナーフェアキャンペーン
レンタルアクセス同時購入キャンペーン・過去レンタルキャンペーン
Shade3D・F8VPS 20%OFFキャンペーン

セミナー・イベントカレンダー
開催間近のセミナー
4/2  ブロックUIプログラ
  ミングツールで学ぶ
  ジュニア・プログラミング
4/3  動的解析
4/4  下水道耐震設計体験
4/5  Shade3D-F8VPS
  メタバース入門

ソフトウェア/支援サービス
VRソフト(バーチャルリアリティ)
《UC-winシリーズ》
・道路・シミュレータ
・ドライブ・シミュレータ
・マイクロ・シミュレーション
・避難解析・シミュレーション
>>その他VRソフト
FEM解析ソフト
・3次元プレート動的非線形解析
・2次元動的非線形解析
・総合有限要素法解析システム
>>その他FEM解析ソフト
土木・建築・設計ソフト
《UC-1シリーズ》
・構造解析/断面
・橋梁上部工
・橋梁下部工
・基礎工
・仮設工
・道路土工
・港湾
・水工
・地盤解析
・CAD/CIM、建設会計
・維持管理・地震リスク
・建築
・船舶/避難
>>その他土木・建築・設計ソフト
クラウド
《スパコンクラウド®》
・スパコンクラウドサービス
《VR-Cloud®》
・リアルタイムVRシステム
解析支援サービス/サポート
・UC-win/Roadサポートシステム
・設計成果チェック支援サービス
・Engineer's Studio®解析支援
・地盤解析支援サービス
・EXODUS/SMARTFIRE解析支援
・xpswmm解析支援サービス
・建物エネルギーシミュレーション
・3Dレーザスキャン・モデリング
・3D模型サービス
・3D報告書・図面サービス
>>その他支援サービス
各種ソリューション
・耐震診断/解析
・鋼橋設計
・橋梁新工法
・建築設計
・自治体
・医療系VRシステム
・パーキングソリューション
・ECOソリューション
>>その他ソリューション