当AI遇上AI,华中科技大学用DeepSeek“整活”了!

信方校园 2025-02-15 11:27:04

最近

DeepSeek

持续引发全球关注

华科大团队

第一时间将其与

华科大自研AI

设计的动漫形象“结合”

在DeepSeek的驱动下

“楚音”“楚铁”两大人工智能IP

惊艳亮相2025年

“钟鸣楚天元宵夜”主题灯会

当AI遇上AI

会碰撞出什么火花

两位去年刚刚“出道”的虚拟IP

到底有多智能?

正月十五,由湖北省文化和旅游厅主办、湖北省博物馆和湖北省群众艺术馆共同打造的2025年“钟鸣楚天元宵夜”主题灯会在湖北省博物馆开幕。活动现场,我校光影交互服务技术文化和旅游部重点实验室(以下简称实验室)用AI黑科技唤醒沉睡的文物,带领观众体验一场别开生面的文物“嘉年华”。

“您好,我是越王勾践剑,铸于2500年前,出土于湖北……”活动现场,“楚铁”和“楚音”首次亮相就自报家门,引发观众的强烈兴趣。当观众要求“楚音”为元宵节赋诗一首时,她出口成章,“皓月当空照,灯谜映华光”。

“元宵节,你有什么话要对我们说吗?”观众提问。“楚铁”略作思考答道,“元宵佳节,灯火璀璨。我虽深埋千年,仍感岁月温馨,愿这份喜乐和团圆长伴大家……”引来观众一阵啧啧赞叹。在DeepSeek大模型驱动下,文物精灵“楚音”和“楚铁”诙谐幽默地与游客进行实时语音对话,并辅以肢体动作和特色音效,成为灯会的一大亮点。

接入“AI大脑”

文物精灵畅聊古今

“楚音”“楚铁”两个动漫形象来自于由建规学院副院长、光影交互服务技术文化和旅游部重点实验室主任蔡新元教授带队打造的全国首个人工智能技术驱动的虚拟乐队——“知音国漫乐队”。

实验室依托团队自主研发的ARTI designerXL人工智能艺术超级计算平台,选出适合荆楚文化的当代时尚元素,将湖北省四大镇馆文物虎座鸟架鼓、越王勾践剑、曾侯乙编钟、石家河玉人像化身为4个不同身份担当的乐队队员。

知音国漫乐队四位成员画像,左一为“楚音”,左二为“楚铁”。

利用AI绘画、大模型等相关技术

蔡新元教授团队创作出

四位乐队队员的3D形象

又通过动捕技术

让虚拟文物IP

从“活”过来到“动”起来

让虚拟文物IP从“活”过来到“动”起来。

亮相本次元宵灯会的

是乐队中的两位成员“楚音”和“楚铁”

设计灵感均来自

湖北省博物馆馆藏的两件重量级文物

“楚音”的主体形象提取于镇馆之宝“虎座鸟架鼓”中“凤鸟”的形象,整体配色参考楚国漆器,以黑色、红色、黄色为主色。发型参考鸟类羽毛展开的造型,增加与文物的相关性并使角色造型更加灵动,服装纹案则提取自鼓面漆画图案。

“楚铁”的形象来自越王勾践剑,其脸上和额头的纹路提取于剑身,立领和剑眉突出越王勾践剑凌厉的气质,蓝绿色耳钉对应剑柄镶嵌的绿色宝石。角色整体以剑身的黑色、黄色为主,衣纹提取于剑身菱格纹,由于文物本身是长条形,所以衣服配饰多为长条形,外套上的袖章为剑身上的文字。

为打造更智慧、更人性化的数字人交互体验,实验室创新性地将“楚音”“楚铁”与 DeepSeek 国产文本大模型进行深度融合。在DeepSeek的驱动下,两个形象更“聪明”也更逼真了。

依托DeepSeek大模型的万亿级参数知识体系,“他们”在复杂场景下的意图理解与逻辑推理能力得到提升,“楚音”和“楚铁”化身“时空导游”,上下五千年文化,诗词歌赋无所不能;通过融合多模态感知引擎与认知大模型,形成"环境感知-意图解析-动态响应"的智能交互链路,实现文本、语音、表情、动作的秒级同步响应,告别传统数字人“说话像背书”的机械感;通过情感贯穿的多模态交互技术,数字人能够根据上下文实时调整表情,不仅实现了口唇同步,更能自然反映语境中的情绪波动。超拟人数字人“楚音”和“楚铁”,在情感表达方面实现了质的飞跃,让对话兼具深度思考和自然温度。

“他们俩的形象是完全使用人工智能自主形成的,人工智能先去理解两件文物的特征,由人工智能程序生成模型,再用大语言模型驱动他们与观众自主互动。”蔡新元介绍道,“‘楚铁’和‘楚音’诗词歌赋样样精通,真正具备了知识认知、创作和回答等能力,这也代表了在AI语境下,文物发展的一个新方向和路径”。

华中科技大学

来源 / 建规学院

部分资料来源于湖北文旅

编辑 / 汪伟颋

校对 / 郭雨辰

0 阅读:3
信方校园

信方校园

感谢大家的关注