展现中国传统文化魅力 腾讯多媒体实验室沉浸式互动水墨画技术为世博会添彩
2021年10月1日,迪拜世博会中国馆正式开幕。据了解,本届迪拜世博会是新冠肺炎疫情发生后的第一次世博会,也是中东地区举办的首届世博会,主题为“沟通思想,创造未来”,寓意凝聚国际社会力量、促进全球合作、创造美好未来。
作为面积最大的外国展馆之一,中国馆积极创新,探索“线上+线下”展示模式,由腾讯与中国贸促会共同打造了世博会中国馆微信官方小程序“玩转中国馆”,让世界各地的观众均可享受便捷有趣的智慧游览体验,足不出户就能感受“华夏之光”的魅力。
值得一提的是,在“玩转中国馆”小程序中,集成了腾讯多媒体实验室通过结合智能水墨画、智能作诗和智能配乐等多媒体算法能力而打造的沉浸式互动水墨画功能,让用户在屏幕上勾画出的简单线条变化成动态山水诗画的效果,为用户带来妙趣横生的沉浸式体验。观众可通过微信搜一搜“玩转中国馆”直达小程序进行在线参观,让远程逛中国馆的人们带来良好的线上体验,也让每一位“云游客”真正做到足不出户、却能尽兴而归。
小程序页面
首先,通过“智能交互水墨画”能力,用户在绘制出山脉轮廓后,多媒体实验室算法通过水墨画生成网络、水墨画风格转换网络及融合补充等一系列操作得到最终的水墨画效果。让没有绘画功底的用户,也可以在算法的加持下,绘画出一副满足浓淡、虚实、留白等国画意境的水墨画作品。
智能交互水墨画算法流程
其次,通过“智能写诗”的能力,工具可以提取用户名输入的文本,将简单的语句转换为诗歌。比如“酒后的竖琴”用户名,通过“智能写诗”的计算后,可以生成“酒后竖琴无一语,春来平地有余欢。一杯相属谁能问,不似江南白鹭滩。”的意境诗句。
文本风格转换模型训练框架
最后,通过“智能配乐”能力,能够为图片和视频自动推荐合适的音乐片段。当用户输入一个图片或视频后,算法将自动识别画面场景、物体、事件等信息,通过这些信息确定风格和情绪,智能匹配与此相关的音乐集合作为本次推荐的候选集。
智能配乐特征比对算法流程
注释:在沉浸式互动水墨画中,算法接收水墨画图像作为输入,能够快速输出与此匹配的悦耳音乐。
通过图像生成以及多模态融合技术,腾讯多媒体实验室打造的沉浸式互动水墨画为迪拜世博会中国馆的文化数字体验增添了极具特色的互动体验,让全世界的参展者都可以突破时间和空间的限制,通过这款沉浸式水墨画互动工具在线上感受中国传统文化的魅力。
据了解,腾讯多媒体实验室专注于多媒体技术领域的前沿技术探索、研发、应用和落地,包含音视频编解码、网络传输和实时通信,基于信号处理和深度学习的多媒体内容处理、分析、理解和质量评估,沉浸式媒体(VR、AR、点云等)系统设计和端到端解决方案;同时负责国际国内行业标准制定,包含多媒体数据压缩,网络传输协议,多媒体系统和开源平台等。未来,腾讯多媒体实验室将持续优化沉浸式智能创作技术,为用户提供更加丰富多彩的互动体验。
相关阅读
-
在日常的学习、工作、生活中,大家都经常接触到作文吧,作文根据体裁的不同可以分为记叙文、说明文、应用文、议论文。你所见过的作文是什么样的呢?以下是小编为大家整理的演讲稿作文6篇...
-
好文章推荐给你...
-
实拍山西矿难真假记者排队领“封口费”近日,新闻出版总署对山西霍宝干河煤矿“封口费”事件中有据可查的涉案人员60人给予了处罚通报,其中有4名新闻记者被给予处分...
-
正在拉斯维加斯举办的全球最大的科技展CES,刚刚居然停电了......
-
如今的社会,抑郁症的发生频率已经越来越高了,我们经常发现,不但是自己的朋友、同事们深陷抑郁情绪的困扰,即使是那些看起来光鲜亮丽的明星们也时常被曝出有抑郁症的事情。...
-
万兴科技“AI简笔画”功能的推出,意味着用户在挥洒“创意”的同时,还可快速借力AIGC新技术,享受创作技法及创作效率的赋能。日前...
-
2021年全球人工智能行业市场规模与投融资现状分析 未来人工智能将呈现螺旋式发展
人工智能行业分析报告:近年来,深度学习+大数据+并行计算共同推动人工智能技术实现跨越式发展。得益于深度学习等AI技术的进步,以及Al在各个行业的深入应用,产业发展迅速。...
-
英语学习即学习英语,主要讲述学习英语的方法,注意事项等内容。学习英语贵在坚持,找到适合自己的方法,多运用多温故。英语学习过程是一种观察,模拟,认识,识记,思考...
-
八十年代,有两个人在计算机领域的发明和创新,在人类进入互联网世界的关键点上提供了强大的助推力。他们一位叫...
-
“科技引领医疗企业继续飞跃!”医疗科技企业的范畴容易描述,方向容易确立,难点在如何持之以恒的在同一个赛道上不停的进步。...
-
它们也是非常受欢迎的脆弱物种,也是世界上被贩运最多的哺乳动物。 红狼(学名:Canis lupus rufus)是一种生存在北美洲的灰狼亚种,分布于国外东南部...
发表评论
版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任如发现本站有涉嫌抄袭侵权/违法违规的内容,请发送邮件举报,一经查实,本站将立刻删除。