蘇 子雄 (Zixiong Su)さん (総合分析情報学コース 暦本研究室博士3年）が、2024年5月15日にハワイ州で開催されたヒューマンコンピュータのトップカンファレンス ACM CHI 2024 で 採択論文の5%に授与されるHonorable Mentionを受賞しました。

Watch Your Mouth: Silent Speech Recognition with Depth Sensing
Xue Wang, Zixiong Su, Jun Rekimoto, Yang Zhang

https://dl.acm.org/doi/10.1145/3613904.3642092

この研究は口の動きだけでテキストを入力するサイレントスピーチに関わるもので、スマートフォンなどに搭載されているデプスカメラを利用して口唇形状を３次元的に取得し、機械学習によって発話内容を抽出します。この研究はカリフォルニア大学ロサンゼルス校(UCLA)の Xue Wang, Yang Zhangとの共同研究です。

Zixiong Su (third-year PhD student at the Rekimoto Laboratory) received an Honorable Mention, awarded to the top 5% of accepted papers, at the top international conference on human-computer interaction, ACM CHI 2024, held in Hawaii on May 15, 2024.

The paper is titled “Watch Your Mouth: Silent Speech Recognition with Depth Sensing” and is authored by Xue Wang, Zixiong Su, Jun Rekimoto, and Yang Zhang.  https://dl.acm.org/doi/10.1145/3613904.3642092

The study involves silent speech input, which uses only mouth movements to input text. It utilizes depth cameras, like those found in smartphones, to capture the three-dimensional shape of the lips and uses machine learning to extract the spoken content. This research is a collaborative effort with Xue Wang and Yang Zhang from University of California, Los Angeles (UCLA).