ゲームの中で, 特に, アバターに身を投じているとき, 彼らの両手を動かせることがよくあります。
そうすることで私たちは, 多くのバーチャル世界の物体に思いのままにアクセスすることができます。

現実世界の手をバーチャル世界に取り入れるには, 現実世界の複雑な物理法則を取り入れる必要があります。
これは, 腕の位置と手の動きを取得することによって実現します。
UnlimitedHandは筋変位センサと加速度ジャイロセンサの配列からなる入力技術を用いることによって,
それを可能にしています。

このチュートリアルでは, UnlimitedHandの入力技術を理解していただきます。

1.0 筋変位センサで手と指の動きを探知する

筋変位センサは, V字型の樹脂シート上の, 前腕部へ筋肉刺激を与える場所に配置されています(図1)。
これによってUnlimitedHandは, 前腕部筋肉の光学的な動きから手と指の動きを推定します。


図 1. 筋変位センサの配置 (右手を使用した場合).

筋変位センサ同士のある組み合わせからシリアル値を読み取り(図2),
3つの主な種類の手の動きを推定します(表1)。
このチュートリアルからStep 4を確認していただき, シリアル値をデバイスから取得していることを確認してください。


図 2. シリアル値と筋変位センサの場所の一致(右手を使用した場合).

動きの3つの種類: ①指を曲げる動き, ②手首の動き(橈屈(とうくつ)/尺屈(しゃっくつ)), ③手を開く動き
異なる筋変位センサの値の組み合わせを処理して読み取ることも可能です。
注意: 以下の表に掲載されているのは右手に装着した場合の情報のみになります。

筋変位センサのポイント(チャンネル)	手の動き
チャンネル 0, 1, 2, 3	指を曲げる動き (右手と左手の場合で異なります)
チャンネル 4, 7	手首の動き (右手と左手の場合で異なります)
チャンネル 5, 6	手を開く動き, 手首の動き(拡張)

表1. 特定の動きを取得するときの筋変位センサの組み合わせ(右手を使用した場合)

2.0 加速度ジャイロセンサで動きを追跡する

UnlimitedHandがしっかりと前腕部に取り付けられていれば, デバイスの中央部分に内蔵された加速度ジャイロセンサが巧妙な動きや腕の位置を追跡します。 取得した運動のデータは, ゲームのリアルタイム・インタラクションのための記録部分に送信されます。

2.1 使用方法

UnlimitedHandのハッカーであれば, 細かい動きの3次元の加速度値や, 腕の方向を示す3つの角度値を取得するのに以下のような関数を使用されるでしょう。

Arduino用の関数:setupAccelGyro/initAccelGyroKalman/readAccelGyro_XYZ_Kalman
readRawAccelValues/readRawGyroValues

Unity用の関数:readUHJointAngles/updateAngle
readUH3DAccel/readGyro/updateUH3DGyroAccel