AI与虚拟人制作流程深度融合魔珐科技正在打造“虚拟人帝国”

科技旋涡 2024-05-16 19:30:37

作者|贾桂鹏

当下,人工智能技术的爆发,AIGC生成算法的广泛运用和各类多模态模型的涌现,让虚拟人正加速进化成真正的“人”,或许能够使其成为AI大模型之后能承载多模态的终极应用。

随着智能技术在传媒领域的下沉,“人”与“非人”的界限被重新划定,虚拟人被赋予全新的社会身份,成为传播的主体。以人类为中心的交流观自然也将不再适用于当下的传媒环境,虚拟数字人的智能化发展必将打破原有的信息传播伦理观。

据艾媒咨询调研数据显示,2023年,中国虚拟人带动产业市场规模和核心市场规模分别为3334.7亿元和205.2亿元,预计到2025年将分别达到6402.7亿元和480.6亿元。

既然虚拟人受到如此关注,未来也有相当的市场体量,很多人对于它如何制作成型就非常感兴趣,日前,元宇宙新声拜访3D虚拟人科技公司魔珐科技,参观了其制作虚拟人的过程,也让我们看到虚拟人行业已经进入到一个流程化的时代,而AI融入虚拟人行业的深度更让人震惊。

降本增效贯穿虚拟人行业

现在,我们在短视频平台上看到虚拟人主播已经不算惊奇了,它们在各个类型的直播间游走着,那些看似栩栩如生的形象已经逐渐走向了主流。

但大家知道在传统的模式下,制作一个虚拟人形象需要多少时间和成本吗?

众所周知,传统虚拟人制作方式是以建模、驱动、渲染为核心的,但其各方面成本一直居高不下,比如一个虚拟人诞生不仅需要顶尖的技术人员花费超过三个月的时间,用户购买虚拟人成本也会达到几十万元,这样的时间和资金成本,对于制作方和用户都不太友好,在企业各环节降本增效的前提下,这样的投入很难长期维持。

不过,在AI技术不断发展的背景下,如今虚拟人制作也正在发生着变革,制作厂商可通过采集真人形象及语言、肢体数据,再对采集的数据进行训练开启直播,一个真人形象的AI数字人主播的“诞生”最快只需几天或者更短时间,而制作成本也降低很多。魔珐科技表示,一个月时间他们可以推出超过200款虚拟人形象。

随着数字人成本平民化,不少企业也都愿意抱有不如一试的心态来制作虚拟人,虚拟人在执行各种选择器、任务器和反馈器的任务,比如在直播间人数变少时生成降价促销的直播话术时具有一定的优势,这也促使数字人产业也在近两年得到了迅速发展。

元宇宙新声认为,随着新兴技术快速发展,中国市场对智能化、个性化服务的需求不断增长。虚拟人技术具有为用户提供高度智能化和个性化服务的潜力,其市场需求前景广阔。虚拟人技术可以应用于客户服务、教育、医疗、金融等领域,为企业提供更为精准、高效和个性化的服务,帮助企业降低成本,提高效率。

AI与虚拟人制作流程深度融合

在拜访魔珐科技的过程中,他们带领我们参观了虚拟人的制作流程,比如如何进行角色建模、角色绑定、配音、脚本、场景和渲染等流程全部展现在大家眼前,让人感到惊喜的是,他们在这些流程中或多或少都加入了AI技术的应用。

其实,并不是AI爆发之后他们才利用技术进行赋能,据介绍,魔珐科技创立以来,锚定在3D虚拟人赛道,并在全栈式AIGC技术上的持续研发创新。

而魔珐科技对于AI技术的应用,不仅能实现像ChatGPT一样的“文生文”和“文生图”,他们凭借多年的技术研发积累,已经可以实现真正的“文生3D高质量超写实虚拟人”,只需输入一段文字,基于文字信息便可AI生成3D虚拟人的表情、肢体语言等。

我们观察到在3D虚拟人的打造过程中,原画、模型、绑定、动画、灯光等多个环节,魔珐科技依托三维图像学技术、美术领域的积累和标准化的流程,可以精确呈现3D虚拟人的表情、眼神、手势以及身体动作,最终让虚拟人呈现出栩栩如生的动作张力。

另外,他们在工业化生产线上,每个工序的交付物都建立了明确的流程与标准,同时,魔珐科技基于工业化产线打造了一套端到端的AI工作群,极大提升了各环节的制作效率。

比如在建模方面,通过AI技术和高质量的虚拟人数据库,对角色进行快速智能建模,在智能生成模型的基础上进行微调,即可获得超写实人物模型,同时还降低了建模人员的技术门槛,提高了制作效率。

据介绍,魔珐科技打造一支拥有“AI+图形学+美术”交叉人才的团队,自研各类人工智能和图形学技术,包括AIGC三维虚拟人的建模和绑定,AIGC三维动画和语音生成,语音识别和NLP等AI交互等全栈技术能力探索与创新。

元宇宙新声看到,魔珐科技希望做的3D虚拟人,它既有很好的美术形象、美术能力,同时也能低成本、低门槛地去做。它能够通过AIGC三维生成各种超写实三维形象,各种语音、动画甚至镜头,最主要的是,他们又有低门槛的AIGC能力赋能整个制作流程,这对于整个行业都有借鉴的作用。

用“魔法”助力魔珐

除了在制作过程中,魔珐科技在产品中也加入了更多的AI技术,包括超写实虚拟人消费级互动产品“魔珐有言”“魔珐有灵”“魔珐有光”将为企业品牌和业务场景带来革新,引爆虚拟人企业级应用市场。

其中,“魔珐有言”采用了智能化的思路,也就是说不是将一切工作丢给AIGC,而是利用AIGC技术来提升3D视频生成的效率、质量与创意,其低门槛、低成本、高质量、高效率地赋能企业在碎片化时代的视频内容生成,让做视频,像做PPT一样简单。

“魔珐有光”则支持AI实时驱动的3D超写实虚拟直播,主播表现灵活准确顺畅丰富,3D虚拟物品展示丰富多样,结合智能互动和3D场景升级,全面提升品牌直播间表现。其还可为品牌/达人/MCN代播机构提供低门槛、低成本、高质量、规模化的虚拟电商直播服务。

而“魔珐有灵”AI交互虚拟人,则可以还原真人之间面对面沟通的场景,帮助企业覆盖全域多端7×24小时为用户提供1v1的专业服务。让虚拟人轻松胜任产品推荐官、虚拟导购、虚拟销售、虚拟HR等多样化的职能工作。

魔珐科技表示,在AIGC技术爆发前,他们就已实现3D虚拟人和3D内容的工业化生产,服务了各行各业的超200家企业客户。自研的全栈AIGC技术则给魔珐科技带来了重塑3D视频生成技术的机会。

在魔珐科技公司,我们体验到“魔珐有言”的能力,大家用传统方式制作视频时,需考虑角色、场景、运镜、灯光、屏幕内的素材等视频要素,而“魔珐有言”在进行3D视频生成时,也会基于3D人物、3D场景和灯光、3D镜头、素材等要素,让对应要素可AIGC,同时再进行智能合成,最终渲染生成3D视频。

另外,“魔珐有言”还内置了海量视频模板案例库,用户生成视频可选择视频场景、人物形象、声音动作等模板,再输入自定义内容进行3D视频内容生成,这一过程用户可对人物、动作、场景甚至相机镜头角度进行编辑。

通过海量模板化的3D预置内容、原子化的3D视频素材,“魔珐有言”做到了3D视频生成结果的可靠可控可编辑,规避了其他视频AIGC的缺陷。

不仅如此,“魔珐有言”的易用性也值得称赞,创作者无须脚本撰写、无须拍摄、无须剪辑、无须后期,无须视频特效,即可一键生成,省去漫长的视频制作流程。只需三步,即可轻松制作,进而大幅缩短了视频制作时间和成本。

我们看到,魔珐科技早在2018年元宇宙概念尚未普及之时,就已在虚拟人赛道上深耕,实现了行业数据从0到1的积累,陆续向市场推出虚拟人1.0、2.0,直至如今重新定义虚拟人理念的3.0,而3.0时代更需要新兴技术的加持,而在参观完魔珐科技制作虚拟人的整个流程后,我们也深刻的感知到科技改变行业已经不是一个口号。

写在最后

未来,我们肯定将会进入到AI时代,这是一个不存在争议的基本判断,高度智能化是人类社会生产生活的必然趋势。要实现这一点,必须有数据积累,有基础设施。数据背后其实是AI技术能力和行业理解力的双重积累。这些双重积累都具备的企业,目前来看,魔珐科技走到行业前列。

魔珐科技创始人兼CEO柴金祥此前说过一段话,让我们很有共鸣,他表示:“虚拟人不仅能帮助我们提升社会效能,也让AI技术脱离冷冰冰的代码与文字,更具人性关怀的温度。”

0 阅读:8
评论列表

科技旋涡

简介:在这里,看懂科技