近日，中国科学院秦博信息自动化研究所、华为提升了基于AI的软硬件平台，打造了手语多模式模式和手语教学测试机，基于“子东泰”三模式，帮助听障人士更好地理解和学习手语。中国有2700多万聋人，手语是聋人交流的主要方式，但手语学习面临着许多挑战，包括词汇更新缓慢、教师短缺、手语标准难以统一等。
手语多模式模型和手语教学试验机研发人员在“紫东太初”三模式模型中学习了12，000个手语单词、50多万个语法单词和70多万个数据，并基于深圳MindSpore AI框架开发了手语多模式模型，率先实现了手语动作与视频、图像显示、文本描述的协同作用。它帮助初学者更好地理解手语的含义。然后，基于手语多模式模型，利用AI软件平台开发了手语教学测试仪。目前，湖南省多所特殊教育学校已开始实施，在一定程度上缓解了手语教师的短缺。手语教学试验机实现文本到图像的自动生成，具备实时手语手势识别、面部表情识别、唇识别等功能，实现新单词的及时学习和更新，适用于特殊教育学校、手语教育师范学院、普通手语推广教学点、全国联合基层培训点等。此外，基于手语多模式模型构建的人工智能手语助手功能可用于同声传译、新闻主持人和服务指南等场景。2021年底，在“紫东太第一”三模式模式的基础上，华为与合作伙伴建立了多模人工智能产业联盟，经过半年多的紧密合作，相继孵化了手语多模模式、手语教学测试机等多个行业解决方案。在人工智能大模型产业化过程中，丰富的数据和参数，更加泛化的应用场景反馈大模型的基本功能，使大模型更加智能，提高对场景的适用性，为产业应用提供更大的支撑，从大模型的创新走向应用。并实现产业周期的迭代升级。未来，基于中国计算能力网-智能计算网络丰富的计算能力，AI大模型在创新和迭代升级中的应用速度将进一步加快，大模型在各个领域的应用将更加多样化。