角膜に写る自分の姿から、スマートフォンの持ち方を特定する技術 慶應大などのチームが開発

Innovative Tech： このコーナーでは、テクノロジーの最新研究を紹介するWebメディア「Seamless」を主宰する山下裕毅氏が執筆。新規性の高い科学論文を山下氏がピックアップし、解説する。 慶應義塾大学 lifestyle Computing Labの張翔さん、杉浦裕太さん、Yahoo! JAPAN研究所の池松香さん、東京工科大学の加藤邦拓さんによる研究チームが開発した「角膜反射像を利用したスマートフォンの把持姿勢推定」は、ユーザーの角膜に写るスマートフォンの像をインカメラで取得し、操作しているスマートフォンの持ち方を識別する技術だ。角膜に写るスマートフォンと操作する指の影から、現在の持ち方を深層学習で特定する。 ユーザーがスマートフォンをどのように持って、どの指で操作しているかの情報は、開発側にとって役に立つ。把持姿勢に合わせた画面表示や操作ボタン位置の自動切り替え、アプリ

[sgo2]

スマートホンを覗く時、スマートホンもまたこちらを覗いているのだ

[yukifrog]

左手持ち・右手中指操作

[ustar]

おじさんはペンホルダー型

[kako-jun]

黒目が黒くない人でも使えるのかしら

[Seamless]

ユーザの目の角膜に反射して写るスマホの画面と操作する指をインカメラで取得し操作中のスマホの持ち方や操作する指を深層学習で識別する。平均精度85％で6種類の持ち方を識別。