【脆弱性】スマートグラス映像からパスワード推定、研究で実証

イスラエルのテルアビブ大学の研究者らは、スマートグラスで撮影した映像から、スマートフォンのパスワードを推定する手法を実証した研究論文を発表した。画面をのぞき見防止フィルムなどで隠していても、指先の動きが記録されれば推定される可能性があるとしている。

研究では、画像認識AIと手の追跡モデルで指先を追い、別のモデルでキーを押した瞬間を特定した。入力の修正に使うバックスペースも自動で検出し、分析対象から除外する。

シフトキーや配列切り替えキーの位置からキーボードの範囲を割り出し、映像に基づく各キーの打鍵確率と、約22億件の漏えいパスワードの統計データを組み合わせて候補を絞る。対象の機種やキーボードアプリを事前に知らなくても、大文字、小文字、数字、記号を含むパスワードを推定できるという。

16人が参加した実験では、全体の77.8%で打鍵数を特定できた。撮影は最大1.8mの距離まで有効で、Pixel 10、iPhone 16、Galaxy A53の全てで効果を確認した。一方、指の移動が極端に小さく高速に打つ人や、迷いながら打つ人、両親指でほぼ同時に打つ人では、精度が下がる限界も確認された。