过去几年,随着算法应用的不断深入,从过去的文本客服,升级为语音客服,再到多模态人机交互系统的发展周期,人机交互模式正持续进化,越来越多的数智人在各行各业不同场景成功“入职”,开始在众多行业中商业化落地,辅助人工服务,为实体场景服务带来的切实改变。
长江计算以智慧算力底座,支撑多模态“紫东·太初”大模型复用南宋御街数字人“杭小忆”训练成果,结合文旅场景数据,进行大模型文本生成、视觉问答、多模态检索下游任务的训练、微调和部署,实现景点导游、商店咨询导购、酒店咨询客服等场景的智能化。
通过在后端部署长江计算G420X V5训练型服务器,基于昇腾910+Inter Cascade Lake处理器,组成异构计算架构,可提供2.24 PFLOPS FP16的超强算力,能有效支撑“紫东·太初”预训练模型,并基于杭州现有文旅数据进行多机多卡分布式训练,得到特定功能的模型并进行调优。同时根据终端的交互需求,进行实时推理,智能驱动数智人做出相应的反馈。
通过将“紫东·太初”大模型针对“南宋御街”场景在行业智慧赋能平台上进行本地化增量训练,使该数智人具备图文音的应用能力,在活字印刷、特色小吃、南宋官窑、丝绸制作等场景实现中文问答、诗文生成、以文搜图等功能,为沉浸式VR体验的数字孪生世界,带来交互式智能体验,打造了中国气派、浙江辨识度的文化标识,也是结合杭州特色在文旅行业的又一重要技术创新实践。
杭州文旅数智人项目的落地应用,对城市的形象是一次有力地提升。长江计算加速文旅数智人应用落地,站在产业发展的角度来看,不仅对城市数智人商业模式进行了有效的探索,同时将推动数智人产业向更智能、更大众化、更低成本方向发展。