Fingerspelling

概要

聴覚障がいを持つ子どもと親が手話でコミュニケーションするための課題に対し、ウェブサイトを開発した。ウェブカメラとハンドトラッキング技術を用いて、画面に表示される3Dの手の形を真似ることで指文字を練習できる。MediaPipe Handsが指の動きを認識し、正確さに応じてスコアを返す。公開10日で15万回、10ヶ月で550万回の正しいハンドサインが生成された。

読みもの版の記事から作成