Eye TrackingでハンズフリーでiPhoneを操作
Mac

Eye TrackingでハンズフリーでiPhoneを操作

  • Oligur
  • 0
  • vyzf
Eye TrackingでハンズフリーでiPhoneを操作
  • ハウツー
iPhone で視線追跡を設定している画像。キャプションには「ママ、見て!手は使わないで!」とあります。
遠くからiPhoneを操作。
画像:D. Griffin Jones/Cult of Mac

アイトラッキングは、iPhoneを視線だけで操作できる、非常に画期的で野心的なアクセシビリティ機能です。食器洗い中に石鹸のついた手でiPhoneを操作したり、車の整備など汚れた手でiPhoneを操作したりする必要がある場合など、いざという時に便利です。また、細かい運動能力が低下している方にとって、この機能は必須の機能となるかもしれません。

おそらく高度なVision Proヘッドセットのソフトウェアを一部流用したと思われるこの機能を使うと、iPhoneをハンズフリーで操作できます。また、Eye Trackingを設定すると、iPhoneのサウンドアクション機能も使えるようになります。この機能を使うと、口の動きを様々に変化させるだけで、懐中電灯の点灯やスクリーンショットの撮影といった特定の操作を実行できます。

読み続けるか、ビデオをご覧ください。

iPhoneでアイトラッキングを使う方法

Appleは2024年5月、ミュージックハプティクスやボーカルショートカットと並んで、アイトラッキング機能を発表しました。Appleの多くのアクセシビリティ機能と同様に、これらの機能は特定の障がいを持つ人々の特定の問題を解決するものです。しかし、最新のアクセシビリティ機能がiOS 18で利用可能になったため、誰でも利用できるようになりました。

目次: iPhoneでアイトラッキングを使う方法

  1. 視線追跡を有効にする
  2. アイトラッキングの使い方
  3. アイトラッキング設定を調整する
  4. iPhoneでアイトラッキングをより良く機能させる
  5. サウンドアクションを設定する
  6. さらに優れたアクセシビリティ機能

視線追跡を有効にする

iPhoneで視線追跡を設定する
スマートフォンのアイトラッキング機能を設定します。
スクリーンショット:D. Griffin Jones/Cult of Mac

「設定」>「アクセシビリティ」>「視線追跡」の「身体機能と運動」セクションで有効にしてください 。Vision Proと同様に、画面上の点を追ってiPhoneをキャリブレーションする必要があります。

アイトラッキングの使い方

iPhone で Eye Tracking を有効にすると、視線を追う、Dwell Pointer と呼ばれる灰色の浮遊カーソルが画面上に表示されます。

  • カーソルがボタンまたはトグル スイッチにスナップして選択されます。
  • しばらく同じ場所を見つめていると、リング状の進行状況バーがカーソルの周りに描画され、カーソルの下にある画面の部分をタップしようとしていることが通知されます。
  • 画面上のフローティングボタンを見つめると、Assistive Touchメニューが表示されます。このメニューでは、スクロール、音量調整、ホーム画面やコントロールセンターの表示などのジェスチャーを、スマートフォンに触れることなく操作できます。
  • 画面の左上隅を見つめることで、いつでも視線追跡を再調整できます。

ドウェルポインターのサイズと色をカスタマイズするには、  「設定」>「アクセシビリティ」>「ポインターコントロール」に移動します。(オプションを表示するには、視線追跡を有効にする必要があります。)ここで、色を変更したり、コントラストを上げたり、ポインターのサイズを変更したりできます。

アイトラッキング設定を調整する

iPhoneでアイトラッキングの動作をカスタマイズするにはどうすればいいでしょうか?「設定」>「アクセシビリティ」>「アイトラッキング」に移動すると、機能の動作を制御するためのさまざまな設定があります。

  • スムージングは​​、アイトラッキングがあなたの目の動きをiPhone画面上のポインターにどれだけ正確に合わせるかを設定する調整スライダーです。スムージングを少なくすると、動きは速くなりますが、動きがぎこちなくなります。
  • 「アイテムにスナップ」では、視線を近づけるとボタン、トグル、その他のユーザー インターフェイス要素が選択されます。
  • 「キーボードキーを拡大」では、テキストを入力するときに iPhone のキーボードが拡大されます。
  • 自動非表示は、アイトラッキングカーソルが表示されるまでに iPhone の画面を見つめる時間を設定します。
  • ドウェルコントロールとは、ボタンをしばらく見つめるとタップする機能です。設定は 、「設定」>「アクセシビリティ」>「タッチ」>「AssistiveTouch」の下部にある「ドウェルコントロール」セクションでカスタマイズできます。

iPhoneでアイトラッキングをより良く機能させる

Appleによると、視線追跡機能を最大限に活用するには、iPhoneを顔から約30センチ離れた安定した場所に置くと良いそうです。MagSafeスタンドにiPhoneを置き、顔に近づけて、メガネをかけている場合は反射や映り込みがあまりないことを確認することをお勧めします。また、iPhoneをダークモードにしておくと効果的かもしれません。

この機能は、私のiPhone 16 Proではより優れたパフォーマンスを発揮します。これは、以前のiPhone 12 Proよりもカメラ性能と処理能力が優れているためです。しかし、Vision Proでは依然として優れたパフォーマンスを発揮しません。これは当然のことです。Vision Proヘッドセットは、顔から2.5cm以内に複数のカメラを配置しています。iPhoneは前面カメラが1つしか搭載されておらず、通常は腕を伸ばして持ちます。精度は同等にはならないでしょう。

サウンドアクションを設定する

サウンドアクションの設定と実践。
たくさん練習したのに、いまだに「クリック」と「クラック」の違いがわかりません。
スクリーンショット:D. Griffin Jones/Cult of Mac

Eye Trackingを設定したら、音声でスマートフォンを操作できる「サウンドアクション」を有効にできます。iOSでは、さまざまな音声ノイズに様々な機能を割り当てることができます。  「設定」>「アクセシビリティ」>「タッチ」>「AssistiveTouch」で、一番下までスクロールして「サウンドアクション」をタップしてください。

「練習」をタップすると、 サウンドアクションをトリガーできるすべての音を確認できます。「E音」と「Eh」、または「Click」と「Cluck」の違いがわからない場合は、「 学習」をタップしてこれらの音の発音方法を簡単に確認しましょう。「完了」をタップすると 戻って音に機能を割り当てられます。

任意のサウンドをタップし、使用したい機能をタップしてください。アクションボタン、懐中電灯、コントロールセンター、画面回転ロック、簡易アクセス、スクリーンショット、Spotlightなどの機能を起動できます。また、背景音、ライブキャプション、車両モーションキューなどのアクセシビリティ機能も起動できます。サウンドアクションを使って、iPhoneの画面を上下にスクロールすることもできます。

サウンド アクションは、アイ トラッキングがアクティブな間のみアクティブになります。

その他のアクセシビリティ機能

その他の便利なアクセシビリティ設定を確認してください:

  • iPhoneの素晴らしい音声合成機能の使い方
  • アクセスガイドを使用して、iPhoneを1つのアプリでロックする
  • 作業中に穏やかな雨音や海の音を流す
  • Macのカーソルのサイズと色を変更する方法
  • iPhoneでテキストを読み上げよう