对于听障群体来说，使用手语沟通的同时，还需要唇部的运动来辅助确认对方所表达的内容；听力健全者在声音嘈杂的交流场景中亦然。本项目借助创意编程工具，抓取交流对象的手势，录制唇语；同时依托深度学习唇语的识别模型，实现实时交互反馈。

　　我们建立了一个现场的手势和唇语识别交互装置，通过该程序将观众置入一个仅仅依靠唇语互动的听障情境中，希望这项创作能够引起大众对听障群体的理解和思考，增进社会对听障人群的关怀和支持。