中科院自动化所发布通用AI平台 可实现图文音“无缝转换”
新华社北京7月12日电（记者董瑞丰）从检索图像、描述视频，到吟诗作赋、续写文章，再到识别语音、双语翻译，虚拟人“小初”日前亮相2021世界人工智能大会，展示了图、文、音三种模态的智能转换和生成。
“小初”具备这样的能力，得益于一个名为“紫东太初”的跨模态通用人工智能平台。该平台由中国科学院自动化研究所研发，基于国产化基础软硬件，仅采用一个大模型，即可“锻炼”人工智能在视觉、文本、语音多个场景的理解能力。
中科院自动化所所长徐波介绍，“大数据+大模型+多模态”将改变当前单一模型对应单一任务的人工智能研发范式，多模态大模型将成为不同领域的共性平台技术，是迈向通用人工智能的重要路径探索。
“‘紫东太初’实现了图、文、音三种模态的统一表达，以图生音，以音生图，将开拓AI在视频配音、语音播报、标题摘要、海报创作等更多元场景的应用。”徐波说。
据了解，中科院自动化所构建了中文预训练模型、语音预训练模型、视觉预训练模型，并通过跨模态语义关联，构建了三模态预训练大模型。
责任编辑：文杰
推荐阅读
造成5人死亡的湖南汝城“6·19”房屋坍塌事故被认定为较大生产安全责任事故，相关责任人员被追责问责。其中，5人移送司法机关，20人受到组织处理。
2021-10-13 20:10:20
公安部12日发布最新统计数据，截至2021年9月，全国机动车保有量达3.90亿辆，其中汽车2.97亿辆；全国机动车驾驶人4.76亿人，其中汽车驾驶人4.39亿人。
2021-10-12 16:17:12
近日，国家发展改革委组织各省区市经济运行部门积极推动主要煤炭生产企业、保供煤矿以及发电供热企业等产运需各方，在年度中长期合同的基础上集中补签采暖季煤炭中长期合同。
2021-10-12 09:58:38
我国农作物良种覆盖率超过96%，自主选育品种占95%，做到了中国粮主要用中国种子，但种业发展水平与国际先进水平还有较明显差距。
2021-10-11 20:49:49
近日，人力资源和社会保障部、财政部、工业和信息化部、教育部、科技部和中国科学院决定实施新一轮专业技术人才知识更新工程。
2021-10-11 18:12:00
据天津市生态环境局、天津市规划和自然资源局等部门联合通报显示，每年冬季有超过1万只国家一级重点保护鸟类遗鸥在天津沿海滩涂栖息越冬。
2021-10-11 18:12:00
中华生活
热门标签