- 0
- 0
- 0
分享
- 从“采销东哥AI数字人”直播,看AI+数字人如何让文化产业上“大分”?
-
原创 04-18
4月16日晚6点18分,京东创始人、董事局主席刘强东的“分身”——“采销东哥AI数字人”在京东家电家居采销直播间开启自己的直播首秀。
据悉,“采销东哥AI数字人”运用了京东云言犀自研的AI驱动大姿态数字人技术。京东表示:为了打造真实的“东哥”,技术团队对大模型做出多次调整:起初“喂”给大模型的演讲素材,虽然充满激情、爆发力强,但过于正式。为此,他们用最新录制的闲谈作为主要素材,其中有刘强东本人的旅行经历,再提取5分钟演讲的韵律特征灌给大模型,通过不断优化,最终才塑造出“采销东哥”AI数字人十分接近本人的声音。
事实上,早在2023年“双11”期间,京东言犀数字人虚拟主播已经在直播间上岗带货,通过AI数字人等技术,以低成本开播、无人值守等特色来辅助商家。
近年来,计算机图形学、深度学习、虚拟现实等技术不断突破和进步,为数字人的发展提供了技术支撑。数字人在表情、动作、语音等方面的模拟能力日益增强,逼真度不断提高,这也使得数字人在文化产业中的应用前景更加广阔。
尤其是今年极具颠覆性的文生视频模型Sora的推出,业内将Sora的出现被看成AI认知世界并与之进行交互的里程碑。生成式AI的深入理解能力、强大的生成能力以及生动的互动能力,使得数字人能够更好地与人类进行交互,为文化产业带来了全新的发展机遇。
新功能&新体验,让传统文化“活”起来
2023年6月9日,科学院古脊椎动物与古人类研究所、周口店遗址博物馆和北京文博远大数字技术有限公司成功设计出了中国首个古人类“数字人”——数字“北京人”。
据悉,数字“北京人”是使用AIGC技术设计而成,利用三维重建技术、图形处理和机器学习等高科技手段,创造出了逼真的数字化形象。他的诞生不仅开启了数字化考古新篇章,也为文物数字化展示带来了创新动力。
今年的“横店仙侠灯会”上,央博、阿里云、优酷首次跨界合作,通过AIGC技术让诗仙“少年李白”和神探“狄仁杰”穿越时空对话,呈现出满满的科技感,为新春灯会现场带来AIGC全新体验的同时,也推动了AI技术与影视文化结合进入深水区。
此次“少年李白”和“狄仁杰”在灯会现场的互动火出圈背后,是通过阿里云通义千问2.0千亿级别超大规模语言模型能力支持,同步结合中科深智的数字人交互技术、神采AI提供的AI背景生成,通过阿里云百炼 AI 平台,开发应用并快速落地,打造出亦真亦幻的大唐盛世。同时借由央博的“少年李白”IP数字人与优酷影视IP《大唐狄公案》的“狄仁杰”现场跨时空交互,为新春灯会现场带来AIGC的全新体验。
滕王阁序古韵新声案例——AI大语言模型与虚拟数字人背序互动,该项目基于人工智能(AI)、虚拟数字人(Avatar)技术、AI诗词创作等技术,游客可以面对虚拟数字人“王勃”背诵《滕王阁序》,“王勃”进行评测打分。“王勃”根据游客背诵的语音,准确识别背诵的文字,对比标准给出评分。在这里游客不再是单向的信息接收者,设计充分考虑了游客的体验感受,背序前后,游客可以与大语言模型驱动的“王勃”进行实时问答,背序中背诵小屏幕中实时反应游客背序的句子,让游客及时进行调整。
除此之外,中国文物交流中心的“文夭夭”、敦煌研究院的“伽瑶”、国家博物馆的“艾雯雯”……他们都是传播文化的“大使”,以一种新奇的方式讲述着中国传统文化。
早在两年前,中国国家博物馆推出了数字人“艾雯雯”和“仝古今”。通过腾讯云智能的交互技术,“艾雯雯”得以拥有超强的自学、适应能力,能够不断更新、丰富自己的知识库,以国博140多万件馆藏为基础,构建丰富的知识储备和互动技能,为慕名而来的游客讲解中华文明。
在AI技术的加持下,“艾雯雯”和“仝古今”迭代了3项新的功能。第一是智能语音讲解,“艾雯雯”将作为义务讲解员,为部分展品提供讲解语音,此功能已在“国家博物馆”App和小程序上线;第二是推出“艾”看文物短视频,“艾雯雯”和“仝古今”将通过特效视频为观众讲解国博精品文物知识;第三是开放中华文明云展,在北京邮电大学团队的技术支持下,“艾雯雯”在“古代中国”基本陈列的虚拟展厅中,带领人们沿着不同主题的观展路线,感受夏、商、西周时期的政治、经济、文化和社会。
应用场景多元化,看技术与艺术的“联姻”
2021年,在北京梅兰芳大剧院,当灯光聚焦舞台,仿佛时光倒流,京剧大师“梅兰芳”的熟悉身影重现眼前。该项目由中央戏剧学院、北京理工大学共同发起,在北京高校“卓青计划”支持下,通过高逼真实时数字人技术,对京剧大师梅兰芳先生进行复现,形成在外貌、形体、语音、表演等各方面都接近真人的“梅兰芳孪生数字人”。
为了让“梅兰芳孪生数字人”表演更多剧目,近几年团队通过AI技术对梅兰芳二三十岁的唱腔数据进行分析处理,再把相关数据的基本特征与梅派传人的声音进行整合,还原梅兰芳不同时期的语音和润腔,为日后的交互表演奠定了声音基础。
同时,“梅兰芳孪生数字人”创造性建立“从艺术到技术”的人物建模方法,探索实践数字演员建模标准和技术伦理规范,把人物性格、情感融入模型驱动参数,改善了国际建模技术在中国应用的适用性,形成了“东方路径”的数字人物表现技术,使数字梅兰芳表演更具东方人物特征。
无独有偶,由南京文投集团及南京元宇宙产业协会发起,南京十竹斋文博有限公司负责建设实施的“元启金陵——南京数字文化客厅”自正式对外开放以来,收获了广泛好评。该元宇宙客厅依托文投集团旗下十竹斋艺术集团、南京市演艺集团、南京创意中心、文都云、大明文化、江苏文创、文创科技等企业的创新成果,并整合了南京元宇宙产业协会成员资源,全方位、多层次实现了展示内容与技术人员的资源共创与共享。
其中,在“元镜”板块的戏剧《梁祝》元宇宙沉浸式演出中,南京市越剧团的演员通过穿戴动捕设备,在虚拟世界中化身数字人“梁山伯”,与真人演员扮演的“祝英台”虚实同台演绎《梁祝》的经典爱情,让现场观众沉浸式感受文化的浪漫。
不仅说戏剧领域,影视领域也常见数字人演员的身影。
3月30日,优酷开播了全明星闯关爆笑综艺《盒子里的猫》。除了超强的阵容和娱乐热点之外,阿里大文娱AI数字人厘里化身出题官亮相也吸睛无数。眼尖的网友更是认出,厘里曾经在网剧《异人之下》中出演二壮一角,从剧集到综艺,厘里的微表情、眼神比之前更为接近真人,而由厘里参与的新纪录片和科幻微短剧也将陆续上线。
在综艺《盒子里的猫》第一期中,厘里沿用二壮形象,以出题官的身份询问黄渤、张艺兴等玩家是否愿意上传个人记忆到数字空间,以数字形式给亲人留念。相比于《异人之下》中的表演,厘里在节目中呈现出的表情和动作更加自然了,阿里大文娱工作人员表示,借助AI算法的优化以及在其他纪录片、短剧中的持续训练,厘里的“演技”正在不断提升。
作为由AI全流程打造的虚拟数字人,天娱数科子公司元圆科技的“安思鹤”可谓全面开花。2023年先后发布AI主笔连载科幻短篇小说《时间少女日志》,AI原创连载漫画《时间少女安思鹤》,文案及画面均由生成式AI产出。
在今年3月24日上线的全网首部虚拟数字人AI短剧《天选神女怎么是AI啊》中,“安思鹤”以女演员的身份,穿越至风格迥异的剧情中,不断为大家呈现充满未知和想象的精彩短剧。剧集的画面、配乐、配音全部由AI生成,实现了从AI图文到AI视频到AI短剧的升级。
3月28日,“安思鹤”的首支AI迷你专辑单曲《AI启梦录》上线,这是“安思鹤”成长历程的真实写照,歌曲用轻快灵动的旋律,诉说着“安思鹤”穿梭于现实和AI世界的精彩故事。单曲的词曲及演唱均由AI生成,这也是首支由AI音乐生成器Suno制作而成的虚拟数字人单曲。
随着AI技术的迭代更新、应用场景的不断拓宽,数字人的潜力将得到进一步挖掘和释放。我们相信,数字人将以其独特的魅力与创意,为文化产业注入更多活力与创意,共同开启文化产业的新篇章。
-
阅读原文
* 文章为作者独立观点,不代表数艺网立场转载须知
- 本文由 文化科技融合汇 授权 数艺网 发表,并经数艺网编辑。转载此文章请在文章开头和结尾标注“作者”、“来源:数艺网” 并附上本页链接: 本站部分文字及图片来源于网络,如侵犯到您的权益,请及时告知,我们将及时处理或删除。