VRでの2次元ジェスチャ認識に最適な方法は？

Question

私は、HTC ViveルームスケールVRヘッドセットでジェスチャー認識を使用するゲームの開発者です。私はジェスチャー認識の精度を向上させようとしています。

（コンテキストのためのゲーム、：。。http://store.steampowered.com//app/488760それはあなたが空気中の記号を描くことで呪文を唱えるゲームだ）

現在、私は2次元ジェスチャー認識のための1ドルのアルゴリズムを使用して、正射投影を使用していますカメラがプレーヤーの水平回転に結びついて、プレーヤーが宇宙で描くジェスチャーを平らにする。

しかし、私はこの問題へのより良いアプローチがなければならないと確信しています！

は私が指示に2Dでのジェスチャーを表現するために持っているので、理想的に私はしたいと思います：

がジェスチャを平らにするのに最適なベクトルを探します。 2D空間に展開します。 ジェスチャー認識アルゴリズムを使用して、ジェスチャーを認識します。

すべての状況下で、100％の精度に近づくために本当に良いでしょう。現在のところ、例えば、戦闘の熱気の中でプレイヤーが円を描こうとすると、ゲームは混乱する傾向があり、代わりにZ形を描いていると仮定します。

すべての提案を歓迎しました。前もって感謝します。

Answer 1

は、ジェスチャー認識装置3.0と呼ばれるこのプラグインは、あなたがまた

Gesture Recognizer 3.0

を取るべきステップに大きな洞察力を与えることができるように思える、私はgithubの中に、このjavascriptのジェスチャー認識のlibを見つけ

Jester

希望します。

Answer 2

私を信じられないかもしれませんが、私は2ヶ月前にこの記事を発見し、VRで魔法のジェスチャーを認識するためのものUnityシステムパッケージを用意することにより、私のVR/AIのスキルをテストすることを決めました。今、私は完全なVRのデモで戻ってきた：https://ravingbots.itch.io/vr-magic-gestures-ai

認識システムがジェスチャーベクトルを追跡して、2Dグリッドに投影します。また、システムを3Dシェイプで操作したい場合は、3Dグリッドを非常に簡単にセットアップできますが、多数のシェイプバリエーションをキャプチャする適切なトレーニングセットを用意することを忘れないでください。もちろん

、パッケージは普遍的であり、そしてあなたは、非魔法のアプリケーションのためにそれを使用することができます。コードはよく文書化されています。 PDFにレンダリングされたオンラインドキュメント1000+ページがあります。https://files.ravingbots.com/docs/vr-magic-gestures-ai/

パッケージはHTC Viveので試験しました。 Gear VRや他のVRデバイスのサポートが徐々に追加されています。

Answer 3

は個人的に私はそれは、コントローラを使用した認証のような多くの機能をカバーしていAirSig をお勧めします。 Vive版とOculus版は無料です。 "あらゆる状況下で100％の精度に近づけるのは本当に良いことです。私の経験では、組み込みのジェスチャーは90％以上の精度で、署名部分は96％を超えています。希望はあなたの要件に合っています。