Project Convey

概要

Cox Communicationsが自閉症スペクトラムの人々のビデオチャット利用を支援するプロトタイプを開発。画面越しの表情や声のトーン読み取りの困難さに対し、センチメントAIで相手の感情をリアルタイムで絵文字に変換するシステムを構築した。表情、発話内容、声のトーンを音声のピッチ解析や音声認識技術で分析し絵文字として表示。プロトタイプ利用者のドキュメンタリー映像を展開し、技術と研究知見をコミュニティに公開した。

読みもの版の記事から作成