拡張現実: Facebook がどのようにあなたの手首をすべての中心に置きたいのか

Facebookは、拡張現実と仮想現実に関する研究作業を加速することを決定した。 Facebook Reality Labs の支援により、その大部分が秘密のままであっても、さまざまなプロジェクトが定期的に注目を集めています。

露出後ヒューマン・マシン・インタラクションとインターフェースに関する今後 10 年間のビジョン, Facebookは今週木曜日、将来のITプラットフォームに関する進捗状況を正式に発表した。そしてこのために、手首は予期せぬ物理的なサポートとなります。

直観的で永続的な非侵入型デバイス

驚きですか？このプロジェクトを担当する Facebook Reality Labs のエンジニアや研究者によると、それほどではありません。中心となるアイデアは、摩擦が少なく、直観的で使いやすく、同時に高い信頼性と機密性を備えたインターフェイスを見つけることです。現実世界から自分を切り離すことなく。

すべてを運ぶには、明らかに拡張現実メガネFacebookのボックスに入っています。そして、相互作用においては、具体的にも抽象的にも神経の中枢は手首となるでしょう。

6 年前、Oculus Research の名目上の後継者である Facebook Reality Labs Research が設立されたとき、チームは汎用入力テクノロジーの設計を開始しました。あらゆる人々の多様なニーズに応え、日常のあらゆるシーンで活用できる」とフェイスブックについて説明する。

そこで、デバイスの周りで考察が始まりました。」直観的、いつでも利用可能、邪魔にならない、使いやすい」だけでなく、仮想オブジェクトの操作やドキュメントの変更など、より複雑なコマンドもサポートできます。そして何よりも、日常的に快適に着用でき、中断することなく、過度のエネルギーを消費することなく動作できる必要がありました。

手首、手の届く資産

音声は直感的ですが、プライバシーや信頼性は確保できません。スマートフォンなどのデバイスは、テーブルの上やカバンの中に置くとすぐに摩擦が増加します。そこでFRLは、手首に装着して、いつでも忘れることができる、センサーが満載のブレスレットのアイデアを思いつきました。快適さ、使いやすさ、機密性: 拡張現実を実現するために、手で簡単に操作できるプラットフォーム (システム、バッテリー、アンテナ) がすべてのボックスにチェックされています。

しかし、この技術的装置の背後には、EMG または筋電図と呼ばれる科学的翻訳もあります。 EMG はさまざまなセンサーを使用して、脊髄の運動神経から手首や手に送られる電気信号を変換します。次に、デバイスはそれらをコマンドに変換して、カスタマイズ可能な方法でさまざまな機能を通信および制御しますが、有効かどうかにかかわらず、各人の状況にも適応します。

だからこそFacebookの研究者たちは、神経システムから送られる信号を捉えやすい手首という部位に注目したのだ。小指を上げて、手を振り向かせてください...単純な意図がEMGによって捕捉されます。

あなたの行動を予測する

«ニューラル インターフェイスを使用して、私たちはマシンを直接制御できるように努めています。身体を動かす脳の外側の神経である末梢神経系からの放射を利用する» と FRL の神経運動インターフェース担当ディレクターである Thomas Reardon 氏は説明します。 「書いたりスワイプしたりする代わりに、システムを通じて同じ方法で意図を表現します。神経質な方でも、ブレスレットは神経系全体のニューロンの電気的活動を利用して、デバイスと対話する新しい直感的な方法を作成します。。 »

ここでは魔法やテレパシーはなく、あなたの思考をしっかりと読み取るという問題はなく、ただあなたの体内に意図を変換する電流を転写するだけです。スマートフォンの画面上でアクションを実行したり、キーボードで入力したりするときに送信されるのと同じ信号。そのためFacebookは、肌に触れる小型バンパーの形、または平らでセンセーショナルなセンサーを備えたいくつかのプロトタイプを検討している。

一方、EMG の利用可能性はすでにかなり進んでいます。したがって、このブレスレットを使用して、拡張現実の目の前以外には存在しない仮想キーボードにテキストを入力することができます。これには、キーボードの「寸法」をジェスチャー、入力速度、さらにはキーの順序に適応させるなど、いくつかの利点があります。一流の仮想カスタマイズ。弓矢やテニスラケットなど、手に持ったあらゆる物体を「仮想化」できる楽しさも忘れません。仮想現実または拡張現実でセンサーを使用するためにセンサーを取り付けるための追加のアクセサリが必要になることが多いもの。

このため、FRL 研究者らは「触覚次元」についても言及しています。これは手首上のシステムからの一種の反応で、感覚を追加することで没入感が向上し、成功したかどうかに関係なく、アクションが現実に対応していることを保証します。実生活のように。 FRL の科学研究責任者であるニコラス コロネーゼ氏にとって、触覚は感情を加えて伝達する方法でもあります。彼が「触覚絵文字」と呼んだものは、有名な画像によって心の中で象徴され、遊び心のある相互作用を可能にするフィードバックの翻訳です。

インテリジェントなクリックやAIがあなたをサポート

コントロールに関しては、スワイプ、ピンチ、移動など、手や指を使って非常に直感的に操作できます。会話中、歩行中など、どのような状況でも簡単に実行でき、適切な反応が得られるジェスチャー。

https://www.youtube.com/watch?v=M5R1NS4CGxU

Facebookはこれを「スマートクリック」と呼んでいます。これらは、アダプティブ インターフェイスと組み合わせられたマイクロ ジェスチャです。したがって、AI はデータ入力を翻訳し、その応答をコンテキストに適応させることができます。あなたが料理をしているのは、あなたのジェスチャーがあなたの行動を裏切っているからです。 AI はこれを理解し、拡張現実でレシピを起動した可能性があるため、タイマーの必要性を提案/理解できます。アクションを提案するので、検証するかキャンセルするだけです。

AIは、あなたが毎週木曜日の朝のようにランニングに出かけ、よく音楽を聴いていることに気づきました。アダプティブ インターフェイスはこれを認識し、トリガーする前にプレイリストを提案します。おそらく、単にこの種の状況では知覚される神経信号が同じであるためでもあります。

積み重なって得られる1000分の1秒

これは、AI がユーザーのニーズを予測するかどうかの問題ではなく、ニーズをより迅速に理解し、数千分の 1 秒を節約するだけであり、それが 1 日の終わりに累積的に貴重な時間を節約できることがわかります。

現時点では、Facebook Reality Labs はまだプロトタイプ開発中のプロジェクトのリリース日を発表していません。最初のリターンは「有望な» とプロジェクトマネージャーのショーン・ケラー氏は断言します。さらにこう付け加えます。革新と発見のこの段階は信じられないほどの瞬間です。なぜならそれは旧世界の激変、つまりテクノロジーを進化させるために私たちがこれまで従い、依存してきたルールの変化を告げるものだからです。。 » しかし、変化はまだ訪れていません。

隔週木曜日の午後 5 時から 7 時まで開催されるショーにご参加くださいロックを解除するによって制作されたフランアンドロイドなどヌメラマ！技術ニュース、インタビュー、ヒントと分析…またお会いしましょうTwitchでライブ配信するもしくは再放送でYouTube で！