为积极响应“一带一路”战略中的“智力丝路”概念,牢牢把握高质量发展这个首要任务,引导学生将所学知识与社会热点相结合,用元宇宙概念和新技术研发积极促进产业高端化,智能化,数字化,浙江海洋大学信息工程学院学生团队创办了“海智元科技创新团队”,研究AI虚拟数字人的开发。学生研发团队在学院院长和教授的指导下,经过数年研究推出一款面向跨境电商的直播虚拟数字人系统,致力于为跨境电商解决人力时间成本大的问题,弥补传统数字人翻译官方、缺少感染力与互动感的短板,赋能一带一路经济文化。
研发成员从数字人形象建模入手,清洗和标注了预处理的收集数据,主要使用Python语言作为开发和编程工具,并结合了TensorFlow或PyTorch等深度学习框架进行模型训练和优化。同时他们利用3D建模软件,如Blender或Maya,进行更加精细的处理,例如对生成的数字人进行细节修饰或特效添加。在特色口音方面,团队通过收集数据、训练模型以及集成TTS系统等方式实现精细化口音需求。同时利用RNN、LSTM、Transformer等深度学习模型进行训练,确保模型充分学习口音、方言间差异并生成自然流畅的语音输出。在交互方面,
团队在部署和使用系统时,注意实时性和稳定性,根据模型性能的评估结果、用户反馈和需求进行持续优化,以确保系统在各直播平台上稳定运行、快速处理弹幕并生成语音回复。在“互动+口音”实际操作中,从音频数据库中调取音频后,用深度学习模型训练,得到SavedModel格式的模型文件,并将其集成到Goolgle Cloud Text-to-Speech,最后导出API接口,即可在交互中应用。
未来跨境电商直播带货的热门方向必将涉及元宇宙为背景下的虚拟数字人直播带货,这一创新领域正逐步成为行业焦点,吸引众多企业争相研发与应用。借助前沿的虚拟现实与人工智能技术,海智元将凭借专属形象定制功能和tts口音交互系统,实现无缝对接国际市场。并且海智元团队率先推出的虚拟推荐官项目,已成功展示了虚拟主播在跨境直播带货行业的巨大潜力—不仅能够显著提升观众关注度和购买转化率,还能突破地域限制,减少传统人力成本,提高销售效能。海智元以其高度拟人化的交互体验以及实时的商品推广能力,正在逐步打破海外企业在虚拟主播技术上的先发优势,有力推动我国跨境电商行业的技术创新与升级。
