「これは次のタッチスクリーンを構築する問題です」と、 Doublepoint という会社の CEO、オト・ペンティカイネン氏はデジタル トレンドの魅力的な次世代ジェスチャー コントロール システムを紹介しながら述べました。これは 、Apple のダブルタップ機能を 強化したものと考えるのが最も適切です。
私は 中にビデオ通話でペンティカイネン氏と話をして、さらに詳しく聞きました。
アプリ以上のもの
Doublepoint が Wear OS 向けにリリースした Wow Mouse という アプリを CES 2024 ですでにご覧になったことがあるかもしれませんが、これは同社が取り組んでいることの始まりにすぎません。 Wow Mouse は、Wear OS スマートウォッチにジェスチャー コントロールを追加し、指と手首の動きを使って操作する手首上のマウスに効果的に変えます。しかし、Wow Mouse は、Doublepoint が取り組んでいることの比較的基本的なデモンストレーションです。
ペンティカイネン氏は、Wow Mouse アプリについて尋ねられた際、「私たちは、より包括的なものを提供しています。そして、ただ 1 回タップするだけでなく、できることはたくさんあります。現在のハードウェアでできる最大のことは、ピンチ アンド ホールドです。つまり、オブジェクトを操作できるだけでなく、実際にスクロールすることもできます。」
Doublepoint ではこれらを「マイクロ ジェスチャ」と呼んでおり、タップして選択する、タップしてスクロールする、ダブルタップするなどのすべてが含まれます。 ダブル タップのダブル ピンチ ジェスチャ を超える追加のジェスチャがあることは非常に魅力的であり、ペンティカイネンがこのテクノロジーをタッチスクリーンに例えた理由の核心に迫るものです。それは、私たちがすでにタッチスクリーンで使用しているのと同じジェスチャの多くを再現しているからです。
では、Doublepoint のシステムはどのように機能するのでしょうか?
これらのジェスチャーの仕組み
「マイクロ ジェスチャ検出の仕組みは、コンピューター ビジョン ベースのハンド トラッキングとは異なります」とペンティカイネン氏は、おなじみの比較を用いて説明しました。 「これはカメラを使用して手のポーズを計算し、これをミリ秒ごと、または指が触れ合うフレーム レートに関係なく実行します。接触を検出する方法には慣性測定ユニットが使用されます。」
慣性測定ユニット (IMU) は特別なハードウェアのように聞こえますが、実際には加速度計、ジャイロスコープ、磁力計が含まれているだけです。言い換えれば、ほぼすべての スマートウォッチやその他のウェアラブル機器 に搭載されているコアセンサーです。
「指が触れ合うときに発生する振動を探します」とペンティカイネン氏は述べ、その時点で Doublepoint のアルゴリズムはその振動を、指を動かしたときに発生する他のすべての振動から区別します。ただし、革新的なピンチ アンド ホールド ジェスチャは非常に珍しく、アルゴリズムの魅力にとって重要ですが、少し異なり、はるかに複雑です。
「ピンチアンドホールドの場合、指がいつ一緒に保たれているかも知る必要があり、実際にそのために腱モニタリングを使用しています。私たちは光学式心拍センサーを筋肉ではなく、指を筋肉に つなぐ 腱を観察するために使用しており、その動きによって、いつ触るのをやめたかがわかります。」と彼は言いました。
構成と精度
Apple の Double Tap の成功の要因の 1 つは、セットアップや構成を必要とせずに機能し、精度も高いことです。 Doublepoint のシステムはどうですか?
「私たちは最初から、設定を必要とせず、装着するとすぐに機能することをセールス ポイントの 1 つとしたいと考えていました。つまり、さまざまな人々からデータを収集し、Body Mass Index (BMI)、年齢、メラトニン レベルなどの関連要素を考慮するプロセスを整備する必要があるということです。非常に優れた精度レベルに達することができました。ほぼ97%から98%の範囲にあります。もちろん、やるべきことはまだたくさんあります」と彼は言った。
また興味深いのは、Doublepoint のジェスチャ認識を備えたスマートウォッチは、視線追跡機能を備えたデバイスなどの他の Bluetooth デバイスとペアリングできるため、連携して動作することです。バックアップや代替として音声認識を使用する必要がないため、このような制御システムはより自然でプライベートなものになります。
クアルコムが興味を示している
ジェスチャー コントロールは新しいものではありません が、Apple の Double Tap システムが最近ジェスチャー コントロールへの関心を再燃させていることは間違いありません。そして、他の競合システムがヘッドセットの制御をより簡単かつ直感的にするために新しくて異なることを試みる可能性があるため、 Vision Pro ヘッドセット がリリースされて初めて注目を集める可能性があります。したがって、クアルコムがダブルポイントのテクノロジーに興味を持っていると聞いても、おそらく驚くべきことではないでしょう。
「私たちはクアルコムとベンダー契約を結んでいます」とペンティカイネン氏は明らかにした。 「これは、私たちのアルゴリズムをクアルコムのチップに組み込むというアイデアを意味しており、もちろん、クアルコムはこれらのチップを現在世に出ているさまざまな時計やフィットネストラッカーのプロバイダーに提供しています。」
クアルコムに加えて、同社はセンサー自体に自社のアルゴリズムを組み込むためにセンサー会社とも協力している。さらに、同社独自のリファレンススマートウォッチプラットフォームもあり、ペンティカイネン氏は、これについて「（アルゴリズムを）使って何ができるのかを人々に知ってもらい、それをどのように製品に組み込むかを示すために設計されている」と述べた。
近日公開？
これは、スクロール、スワイプ、音量や明るさなどの値の変更を可能にする、Doublepoint のジェスチャーおよびピンチアンドホールド技術を備えた新しいスマートウォッチが間もなく登場することを意味しますか?
「私たちのパートナーがいつ製品を市場に投入できるかについてのスケジュールは確認していませんが、これらのことは現在非常に急速に進化していると言えます」とペンティカイネン氏は述べた。
私たちの短い会話の中で、ペンティカイネンは何度か Doublepoint のジェスチャー コントロール システムとタッチスクリーンを比較し、私たちは彼がなぜそれらを作ったのかについてより良い説明をして終わりました。
「タッチスクリーンは基本的に携帯電話から始まりましたが、今ではどこでも目にするようになりました」と彼は言いました。 「これにより、あらゆる種類の新しいデバイスが可能になりました。 Apple は昨年、ジェスチャー認識の強化に力を入れ、基本的にジェスチャーが改善の重要な手段となることを示しました。したがって、私たちとしては、次のタッチスクリーンと考えられるものを使用して、できるだけ多くの企業にこれを提供したいと考えています。」
Doublepoint のテクノロジーを搭載したスマートウォッチが到着するまで待つ必要がありますが、 Wow Mouse アプリ を通じて基本バージョンを試すことができます。現在、一部の Wear OS スマートウォッチ向けに Google Play からダウンロードできるようになっています。