ヤフー株式会社と慶應義塾大学、東京工科大学は、スマートフォンのフロントカメラ（インカメラ）で撮影された顔写真を使用し、角膜反射像を機械学習で分類することで、スマートフォンの持ち方などを推定する新しい手法を開発した。
　この手法は、ヤフー株式会社 Yahoo! JAPAN研究所 池松香 上席研究員、慶應義塾大学 理工学部 杉浦裕太 准教授、慶應義塾大学大学院 理工学研究科大学院生 張翔、東京工科大学 メディア学部 加藤邦拓 助教の研究グループにより開発された。

　多くのスマートフォン用アプリでは、右手親指での操作を前提に画面表示が設計されており、スマートフォンの大画面化が進む昨今においては操作しづらい場合がある。また、既存の「把持姿勢」を推定した研究では、新たにセンサーを用意する必要があったり、スマートフォンの機種の違いによって結果に影響が出たりするといった課題があった。

　研究グループは、スマートフォンを操作する際に画面の光が角膜に反射することで画面の形をした角膜反射像が映り、それが「把持姿勢」に応じて異なることに着目した。そこで、スマートフォンのフロントカメラで顔写真を撮影し、顔写真から角膜反射像を切り取り、機械学習を使って角膜反射像を分類することで「把持姿勢」を推定する本手法を開発した。

　この手法は、スマートフォンに内蔵されたフロントカメラを使用するため、さまざまな機種のスマートフォンに適用でき、容易にアプリに組み込むことができる。
　今後は、より大規模かつ実環境に近い状態での実験を行うほか、スマートフォンに内蔵されているカメラ以外のセンサーを併用したり、推定アルゴリズムを改善したりすることで、より高い精度で安定して「把持姿勢」を推定することを目指す。