186 / 2022-10-06 15:41:09

HelpToSee：基于手势识别的视障人士辅助软件

手势识别,人机交互,图像描述,语音播报,医疗辅助,交流辅助

A. 普通高校组-应用类 > A1组：文化创意（文化+科技融合、艺术+科技融合等）

       在我国，目前有许多失明者，他们难以正常地感知世界、获取信息，这对他们的生活、工作、学习等方面都造成了很大的影响，导致了失明人群失去了正常生活的能力和与常人公平竞争的机会。对于失明者而言，他们失去了视觉，但是触觉与听觉还在，因此他们可以通过倾听画面图像描述的结果来获取周围环境的信息与情况。在我们的项目中，我们将“手势识别”与“图像描述”进行结合——通过手势可以在摄像头范围内进行截图，并在PC端、移动端上显示出对于截图图像的文字描述，同时可以对描述内容进行汉语语音播报。“手势识别+图像描述”的结合，比传统的图像描述具有更强的实时性以及交互性，能够辅助失明者的正常生活。在解决跨语言交流困难的问题上，也做出了重要贡献。团队认为该项目贴近实际，有明确的目标用户及使用场景，并且具有清晰的受众或市场定位。