スマートフォンの持ち方をフロントカメラで推定する手法を開発-角膜反射像を機械学習で分類-慶應義塾大学,ヤフー株式会社,東京工科大学
多くのスマートフォンアプリケーションでは右手の親指での操作を前提に画面が設計されているが,スマートフォンの把持姿勢を推定することで把持姿勢に合わせた画面表示が可能になる。
同グループは,スマートフォンを操作する際に画面の光が角膜に反射することで画面の形をした角膜反射像が映り,それが把持姿勢に応じて異なることに着目した。そこで,スマートフォンのフロントカメラで顔写真を撮影し,顔写真から角膜反射像を切り取り,機械学習を使って角膜反射像を推定するシステムを開発した。
本研究の新手法はスマートフォンに内蔵されたフロントカメラを使用するため,さまざまな機種のスマートフォンに適用することができる。本手法をスマートフォンアプリケーションに組み込むことでアプリケーションの操作性を向上させることができるほか,スマートフォンを長時間同じ把持姿勢で使用することに起因する疾患の予防に利用できる可能性が期待される。