サムネイル|手の位置と動きを検出する単純なジェスチャ認識アルゴリズムによって感知される子供。 ジェスチャ認識(ジェスチャにんしき、)は、数学アルゴリズムを介して人間のジェスチャを解釈することを目的としたコンピュータサイエンスと言語技術のテーマである。これは、コンピュータビジョンの専門分野の下位区分。ジェスチャは、あらゆる体の動きや状態から発生する可能性があるが、通常は顔や手から発生する。この分野の現在の焦点には、顔からの感情認識と手のジェスチャ認識が含まれる。ユーザーは、簡単なジェスチャを使用して、デバイスに物理的に触れることなく、デバイスの制御または操作が可能。手話を解釈するためにカメラとコンピュータビジョンアルゴリズムを使用して多くのアプローチがなされてきた。姿勢、歩行、パソコンおよび人間の行動の識別と認識も、ジェスチャ認識技術の対象Matthias Rehm, Nikolaus Bee, Elisabeth André, Wave Like an Egyptian – Accelerometer Based Gesture Recognition for Culture Specific Interactions, British Computer Society, 2007。ジェスチャ認識は、方法と見なすことができる。したがって、キーボードへの入力の大部分を制限するプリミティブテキストユーザインタフェースやGUI(グラフィカルユーザーインターフェイス)よりも、マシンと人間の間に豊かな架け橋を築くことができる。マウスを使用して、機械的なデバイスなしで自然に相互作用する。

概要 サムネイル|300x300ピクセル|ジェスチャ認識は、通常ミドルウェアで処理され、結果はユーザーアプリケーションに送信される。 ジェスチャ認識機能:

より正確な 高い安定性 デバイスのロックを解除するための時間の節約

ジェスチャ認識の主なアプリケーション:

自動車セクター 家庭用電化製品セクター トランジットセクター ゲーム部門 スマートフォンのロック解除 防御 ホームオートメーション 手話の自動翻訳Chai, Xiujuan, et al. "Sign language recognition and translation with kinect." IEEE Conf. on AFGR. Vol. 655. 2013.

ジェスチャ認識は、コンピュータビジョンと画像処理の手法を使用して実行できるSultana A, Rajapuspha T (2012), "Vision Based Gesture Recognition for Alphabetical Hand Gestures Using the SVM Classifier", International Journal of Computer Science & Engineering Technology (IJCSET)., 2012。

文献には、コンピューターに接続されたカメラによるジェスチャまたはより一般的な人間のや動きのキャプチャに関するコンピュータービジョン分野での進行中の作業が含まれるPavlovic, V., Sharma, R. & Huang, T. (1997), "Visual interpretation of hand gestures for human-computer interaction: A review", IEEE Transactions on Pattern Analysis and Machine Intelligence, July, 1997. Vol. 19(7), pp. 677 -695.R. Cipolla and A. Pentland, Computer Vision for Human-Machine Interaction, Cambridge University Press, 1998, Ying Wu and Thomas S. Huang, "Vision-Based Gesture Recognition: A Review" , In: Gesture-Based Communication in Human-Computer Interaction, Volume 1739 of Springer Lecture Notes in Computer Science, pages 103-115, 1999, , Alejandro Jaimes and Nicu Sebe, Multimodal human–computer interaction: A survey , Computer Vision and Image Understanding Volume 108, Issues 1-2, October–November 2007, Pages 116-134 Special Issue on Vision for Human-Computer Interaction, 。

ジェスチャ認識とペンコンピューティング:ペンコンピューティングは、システムのハードウェアへの影響を軽減し、キーボードやマウスなどの従来のデジタルオブジェクトを超えて、制御に使用できる物理的な世界のオブジェクトの範囲を拡大する。このような実装により、モニターを必要としない新しい範囲のハードウェアが可能になる。このアイデアは、ホログラフィックディスプレイの作成につながる可能性がある。ジェスチャ認識という用語は、グラフィックスタブレットでのインク、マルチタッチジェスチャ、認識など、テキスト入力以外の手書き記号をより狭義に指すために使用される。これは、ポインティングデバイスカーソルを使用して記号を描画することによるコンピューターの相互作用Dopertchouk, Oleg; "Recognition of Handwriting Gestures", gamedev.net, January 9, 2004Chen, Shijie; "Gesture Recognition Techniques in Handwriting Recognition Application", Frontiers in Handwriting Recognition p 142-147 November 2010Balaji, R; Deepu, V; Madhvanath, Sriganesh; Prabhakaran, Jayasree "Handwritten Gesture Recognition for Gesture Keyboard" , Hewlett-Packard Laboratories。(ペンコンピューティングを参照)

ジェスチャータイプ コンピュータインターフェイスでは、2種類のジェスチャが区別されるDietrich Kammer, Mandy Keck, Georg Freitag, Markus Wacker, Taxonomy and Overview of Multi-touch Frameworks: Architecture, Scope and Features 。オンラインジェスチャを考慮する。これは、スケーリングや回転などの直接操作と見なすこともできる。対照的に、オフラインジェスチャは通常、インタラクションが終了した後に処理される。たとえば、コンテキストメニューをアクティブにするために円が描かれる。

オフラインジェスチャ:ユーザーがオブジェクトを操作した後に処理されるジェスチャ。例として、メニューをアクティブにするジェスチャがある。 オンラインジェスチャ:ダイレクトマニピュレーションジェスチャ。これらは、有形のオブジェクトを拡大縮小または回転するために使用される。

タッチレスインターフェース タッチレスユーザーインターフェイスは、ジェスチャ制御に関連する新しいタイプのテクノロジー。タッチレスユーザーインターフェイス(TUI)は、キーボード、マウス、または画面に触れることなく、体の動きやジェスチャを介してコンピューターにコマンドを送信するプロセス。ジェスチャコントロールに加えて、タッチレスインターフェイスは、デバイスに物理的に触れることなくデバイスと対話する機能を提供するため、広く普及している。

タッチレステクノロジーの種類 スマートフォン、ラップトップ、ゲーム、テレビ、音楽機器など、このタイプのインターフェイスを利用するデバイスは多数ある。

タッチレスインターフェイスの1つのタイプは、スマートフォンのBluetooth接続を使用して、企業の訪問者管理システムをアクティブにする。これにより、COVID-19パンデミックの際にインターフェースに直接触れる必要がなくなる。

入力デバイス 人の動きを追跡し、実行している可能性のあるジェスチャを判別する機能は、さまざまなツールを使用して実現できる。キネティックユーザーインターフェイス(KUI)は、ユーザーがオブジェクトやボディの動きを通じてコンピューティングデバイスと対話できるようにするタイプのユーザーインターフェイス。KUIの例には、タンジブルユーザーインターフェイスや、WiiやMicrosoftのKinectなどのモーション対応ゲームやその他のインタラクティブプロジェクトが含まれる。

画像/ビデオベースのジェスチャ認識では多くの研究が行われているが、実装間で使用されるツールと環境にはいくつかの違いがある。

この別の例は、。この場合、マウスの動きは、ジェスチャを表すために時間の経過に伴う加速度の変化を調べることができる、人の手によって描かれる記号に関連付けられるPer Malmestig, Sofie Sundberg, SignWiiver – implementation of sign language technology Thomas Schlomer, Benjamin Poppinga, Niels Henze, Susanne Boll, Gesture Recognition with a Wii Controller, Proceedings of the 2nd international Conference on Tangible and Embedded interaction, 2008AiLive Inc., LiveMove White Paper , 2006。このソフトウェアは、人間の震えや不注意な動きも補正するElectronic Design September 8, 2011. William Wong. Natural User Interface Employs Sensor Integration.Cable & Satellite International September/October, 2011. Stephen Cousins. A view to a thrill.TechJournal South January 7, 2008. Hillcrest Labs rings up $25M D round.。これらのスマート発光キューブのセンサーは、手や指、および近くにある他のオブジェクトを感知するために使用でき、データを処理するために使用できます。ほとんどのアプリケーションは音楽とサウンドの合成Percussa AudioCubes Blog October 4, 2012. Gestural Control in Sound Synthesis. が、他の分野にも適用できる。

関連項目 感情認識

脚注

外部リンク ジェスチャーとペンコンピューティングへの参照の注釈付き参考文献 ペンベースコンピューティングの歴史に関するメモ(YouTube) 未来、それはすべてジェスチャーです—ジェスチャーインターフェースとビデオゲーム FordのGesturallyInteractive Advert —デジタルサイネージとのやり取りに使用されるジェスチャー 3Dハンドトラッキング—文献調査