AI+XR成巴黎奥运会主角,中国企业的科技之美

雷科技 2024-08-13 21:23:26

北京时间8月12日凌晨,奥运会所有赛程结束,中国体育代表团夺得40块金牌位列金牌榜并列第一,取得境外参赛的最佳成绩。

当世人在感叹中国队实力“轻舟已过万重山”时,奥运会背后的技术应用,同样也已是沧海桑田。

100年前,1924年第八届奥运会在巴黎召开,时值现代奥林匹克运动复兴30周年,奥林匹克格言“更快、更高、更强”被首次引入,不过全世界的观众却只能通过报纸上的文字观看头一天的赛况。

100年后, 2024 年,巴黎再度燃起奥运圣火,世界也已发生了天翻地覆的变化:报纸与广播早已是「时代的眼泪」,人们观看奥运会的方式变得前所未有的多样化:客厅的大屏电视,手上的移动终端,头上的XR眼镜。不同设备的互动画面背后,更有AI视觉、3D动画、动作捕捉、空间计算等诸多技术的深入应用。

2024年的巴黎奥运会被誉为“科技奥运”的集大成者,AI+XR 更是成为当之无愧的「主角」。从运动员训练到裁判打分,从计时计分到场馆设施维护,从赛事传播到观赛互动……在中国移动咪咕打造的国内最大“XR空间观赛平台”上, AI与XR技术也被大规模应用。毫不夸张地说,2024年奥运会书写了“AI+XR奥运”的第一次。

超越现场的「XR空间观赛」

现场观赛对于所有观众都有强烈的吸引力,然而现场容纳人数终究有限,特别是巴黎奥运会这样的顶级赛事,对大多数观众来说到现场都成了一种奢望。

正因为此,人类一直在想方设法通过技术的迭代,让万里之外的全球观众能够突破空间限制,身临其境地沉浸式观看比赛。这届巴黎奥运会期间风靡的「空间观赛」,就让体育观赛进入到全新阶段。

在奥运会前夕,重注元宇宙XR的Meta 宣布, Quest 用户可通过流媒体平台 Peacock,在虚拟空间中沉浸式观看巴黎奥运会,包括篮球、足球、田径等全部赛事。中国科技公司不遑多让,作为2024 年巴黎奥运会持权转播商的中国移动咪咕,率先推出了 XR 空间观赛平台,通过集成应用AI、AR、VR、裸眼3D、元宇宙和空间技术,用户除了可以在咪咕视频APP上AI直播看奥运、进入元宇宙空间大屏看奥运外,还能够通过 Apple Vision Pro设备 、3D端设备沉浸式看奥运。

体育观赛是XR设备的代表应用,身临其境的“沉浸式体验”也是XR观赛应用常见的卖点。作为首批在Apple Vision Pro上提供流媒体服务的平台之一,今年奥运期间用户通过「咪咕视频-Vision」基于全新的空间计算技术,感受到了「空间观赛」带来的超越现场的体验。

首先,用户可以拥有更多的视角甚至“分身”观赛。在观看一场比赛时,空间观赛的方式可以获取不同机位采集的观众视角、上帝视角、裁判视角,甚至运动员们的场上视角。如果对多场同时展开的比赛感兴趣,也不再担心“分身乏术”,「咪咕视频-Vision」的「五屏多赛同看」功能,最多能支持五个屏幕同时展示五场比赛画面,用户可同时观看中国跳水队的精彩表现、乒乓球和羽毛球的对决以及赛艇和攀岩比赛的“夺金时刻”,甚至可以像导播一样随时切换主画面。

其次,用户能够拥有比现场以及过往直播观赛更强的互动体验。在「咪咕视频-Vision」里,产品从用户需求出发,设计了“比心手势”发送应援表情的交互功能,让用户即使在家看比赛也能尽情应援;再比如,还可以把玩 3D 奥运奖牌且以图片形式分享到朋友圈。

最后,用户还能在鼓浪屿元宇宙、中国移动元宇宙社区等元宇宙空间里“呼朋唤友”,与搭子们一起观赛,边看边聊。

体育比赛是群众的运动,观赛同样是强社交属性的活动。跟朋友一起观赛边看边聊,符合更多人的预期。在元宇宙空间观赛的应用中,用户不需要耗费时间去到特定聚会场所,就可以跟朋友一起观赛,或者在观赛中认识同好。

比如在「元宇宙第一岛」鼓浪屿元宇宙里,用户不仅能结交体育「搭子」,还能一起在马约翰体育场上大屏观赛,一边为奥运健儿加油一边畅聊体育话题。

比如在中国移动元宇宙社区的“竞技氛围”主题空间里,解锁看奥运、竞奥运、猜奥运、答奥运、庆奥运5种赛事内容体验,可以自由打卡霹雳舞、攀岩、田径、足球4大奥运竞技游戏场景,观看奥运之际更能领略到赛场同款热血拼搏的精神。

拥抱奥运会所代表的体育场景,也是鼓浪屿元宇宙等元宇宙产品贴合奥运热点、发挥产品建设主动性的一步妙棋。元宇宙本质是数智与现实的深度融合,源自现实却超越现实。给用户提供媲美乃至超越真实世界的空间场景,是Meta、咪咕等元宇宙头部玩家努力的核心方向。

在今年的数字峰会论坛上,中国移动咪咕公司曾介绍鼓浪屿元宇宙已实现八项AI自研能力应用,从元宇宙空间建设,到用户互动玩法体验,到城市文旅内容宣传,能够全方位助力数实融合产品升级。巴黎奥运会让用户在元宇宙空间里观赛,也大幅提升了鼓浪屿元宇宙在“文、旅、体”综合场景中的空间实力。另一方面,奥运等体育赛事「空间观赛」的新方式,无疑也将进一步推动元宇宙应用的普及。

总的来说,2024年巴黎奥运会上风靡的「空间观赛」,让全球观众拥有了超越了现场观众的体验,也让奥运会转播技术从过往的“高清化”PK,正式进入到“空间化”竞争。体育比赛的传播,也从内容的单向输出,进入到全视角、互动式和社交化的空间时代。

其实在体育迷中,通过XR应用进行「空间观赛」的需求一直都存在,德勤在《2023年体育迷洞察报告》中指出,观众更期待定制个性化的观赛体验,例如可从运动员的角度用VR观看比赛,大约三分之一的40岁以下人士表示,他们有兴趣通过VR观看比赛或与朋友共同观看比赛。经历巴黎奥运会的洗礼,在Meta Quest、中国移动咪咕等XR头部玩家的推动下,更多体育迷以及体育迷外的普罗大众,将全面进入到「空间观赛」时代。

AI+XR如何深度重构奥运?

用户观赛的空间化变革,只是AI与XR技术重构奥运的冰山一角。雷科技观察发现,在这届巴黎奥运会赛场内外,AI与XR技术几乎已无处不在,“润物细无声”地渗透在每一个角落。

巴黎奥运会是史上首次广泛应用AI技术的奥运会,国际奥委会主席巴赫甚至表示,奥运会已进入人工智能时代。在今年的奥运会现场,就有诸多AI交互应用,比如欧洲大模型新秀 Mistral AI 公司开发的 AI 对话机器人「AthleteGPT」,就承担起了来自全球 200 多个国家运动员关于导航以及其他问题的解答任务。

不过,今天的技术应用已进入到大整合时代,AI技术与5G、云计算、XR、元宇宙、空间计算、3D等技术不断结合,迸发出更多创新的火花。在今年奥运会上,AI与云计算、XR、3D、空间计算技术的融合应用,就体现得淋漓尽致。

比如云计算与AI和XR技术的融合。在奥运会转播中卫星发挥着关键角色,然而卫星传输能力受限,因此观众看到的画面相对单一。今年巴黎奥运会首次大规模使用云端转播,超过三分之二的奥运直播信号从巴黎传输到全球200多个国家和地区,基于云转播,AI与XR技术可以重构赛事内容本身,比如用AI渲染的8K超高清内容可以更好地呈现赛事细节;再比如增强型3D转播可以通过捕捉比赛精彩瞬间,生成慢动作、时间静止等特色画面。

用AI+XR技术驱动着奥运赛事的内容制作,也成了巴黎奥运会的一大突破。

展现比赛中精彩时刻的「子弹时间」特效被许多观众津津乐道。通过 AI 增强的 360 度回放系统,本届奥运会 25 项赛事的转播中,都会在精彩时刻呈现高自由度的瞬时回放,观众可以在移动终端上看到更生动的比赛细节。如果在支持空间深度信息(俗称「有空间感」)的 XR 设备观看,更是可以得到具备3D 环绕视角的临场感——如同科幻电影中的「全息影像」一样,可在任何角度都能看到立体的成像,而比拟现场的临场感、超越现场的空间感,正是XR技术的最大魅力。

在2D设备上呈现的内容,在AI与XR技术驱动下,也在不断实现用户体验的突破。比如在国内首档 AI 乒乓球赛事复盘节目《AI乒中国》中,中国移动咪咕就利用 AI 技术实时采集乒乓球的落点和轨迹数据,将落点和轨迹的原始坐标数据进行后台实时归类统计,并通过AI乒乓球转向转速分析、AI乒乓球运动轨迹分析等五大核心功能,实现多种形式的数据可视化呈现,让观众能够更科学、深入地了解乒乓球运动,更好地观看比赛的细节和运动员的表现。

AI+XR技术在让用户更好地观看赛事之余,也让年轻人可以喜闻乐见的形式参与到奥运会中。中国移动咪咕推出的AI数智人“全民助战写真”就被网友玩得刷起了屏。借助数智人AI大模型与实时渲染技术,精心设计的32个奥运会运动大项以及其他加油助威模板,这个夏天咪咕成功让人人都能拥有奥运助战数智人写真。

相较于目前市面上大部分AIGC产品,用户上传照片多、等待生成时间长,“全民助战写真”仅需一张照片,即可在保证用户信息安全的前提下生成不同风格的助战写真。很多用户将自己的AI写真分享到社交媒体给中国运动健儿加油。人人参与奥运再传播,生动地体现了奥运“全民参与”的理念,这也是本届奥运会最突出的一大特征。

AI+XR技术还被广泛应用到世界各国的运动员训练中。

助力中国跳水队拿下多块金牌的全红婵背后,就有着AI+XR训练技术的加持。“3D+AI跳水训练系统”能够识别出全红婵跳水时的起跳速度、身体姿态、旋转角度、入水角度等细微动作,起跳比理想状态稍低几厘米,或者入水角度存在微小偏差,基于这些分析结果,教练团队可给她提供精准的改进建议。在奥运会前,法国短跑队、澳大利亚游泳队都利用 VR 进行接力训练。

AI+XR技术一方面可以毫厘不差地全维分析运动员的动作,给其训练提供精准建议;另一方面则可利用临场感、沉浸感与立体感等数据呈现、互动交互与3D视觉,让运动员可以更好地模拟训练。未来基于AI+XR技术训练提高运动员对现场的适应力,或许也将被提上日程。

巴黎奥运会,只是AI+XR技术在体育中广泛应用的一个美好的开始。

数字奥运,展现中国科技之美

与时俱进的奥运会,受益于技术的进步,反过来也在推动着技术的普及。今年4月,国际奥委会颁布旨在引领全球体育领域开展人工智能计划的纲领性文件——《奥林匹克AI议程》,巴赫说,《奥林匹克AI议程》核心是确保AI与体育的融合将让所有人受益,而不仅仅是少数人。

让人欣慰的是,在“数字化奥运”中,中国企业正在扮演着日益重要的角色——一如在全球数字化经济中,中国企业发挥的引领地位一样。阿里云成为奥运会官方云服务合作伙伴,其以AI驱动的云计算技术支撑本届巴黎奥运会“云上全球转播”;中国移动咪咕在拿下2024 年巴黎奥运会持权转播商后,并没有只做传统的短视频内容转播,而是利用其擅长的AI+XR技术,以「XR空间观赛」重新定义奥运会的观赛互动体验,引领世界体育科技观赛与传播的新潮流。

中国科技公司在奥运会展现“数字化之美”,是多年数字化技术深耕的厚积薄发。以中国移动咪咕为例,作为国内第一体育内容平台,早在2022 年北京冬奥会就把 AR 技术用到了赛事演播室中,利用 360 度环拍技术和「子弹时间」特效,将苏翊鸣高质量的 1620 动作,永远定格了下来。而在 2023 年杭州亚运会和 2024 年欧洲杯期间,中国移动咪咕也一直在基于 AI 和 XR 技术,结合观众反馈,不断升级科技观赛新体验。

“应用为先”的中国科技公司秉持的普惠理念,与巴赫倡导的“AI与体育的融合将让所有人受益,而不仅仅是少数人”也有着异曲同工之妙。

比如中国移动咪咕打造的“XR空间观赛”体验,打破过往单一硬件设备的限制,球迷通过不同设备端口进入咪咕视频平台,可感受丰富的科技观赛玩法。其推出的「咪咕视频 3D 版」甚至还提供了“裸眼3D”的应用选项,没有XR头显设备的用户,只需一台支持裸眼 3D 技术的手机或者平板,如酷派大观3系列、中兴远航3D手机、中兴 Nubia Pad 3D一代等终端设备,就能轻松拥有更具临场感的观赛体验。

裸眼3D普及本就不易,让奥运赛事转播支持裸眼3D更是难上加难。

基于中国移动5G-A网络,中国移动咪咕率先研发了5G-A沉浸式裸眼3D智能观赛技术。基于视差估计、遮挡恢复、视频超分等AI技术,中国移动咪咕已实现2D到3D内容的全自动化转制。通过针对体育复杂画面进行语义识别训练,提升空间视差关系正确性和图像稳定性,减少画面抖动或者窜扰问题,咪咕提升了3D赛事直播实时性、清晰度与稳定性。

从2024年欧洲杯期间首发应用,到巴黎奥运会期间让裸眼3D直播深入应用,中国移动咪咕通过AI技术大幅降低3D内容生产成本,让更多内容3D化进而推动裸眼3D普及到更多设备、更多场景、更多人,正是对科技普惠理念的踏实践行。

今年国际奥委会已决定与沙特阿拉伯奥委会合作,于2025年在沙特举办首届电竞奥运会,旨在更多地吸引年轻人,巴赫当时表示,“每月与我们的社交媒体互动超过6亿次的1.2亿关注者,正在过着一种数字化的生活,而运动员也在融入数字生活。如果我们想要融入这些人,就必须以数字化的方式参与这一代人的生活。”

作为最多人类参与的体育比赛,奥运会一直都在深深地融入人类的文化与生活,也成为了人类文化与生活的一部分。在“数字化”成为现代社会如同“水与空气”一般的生活要素后,数字化也成为奥运会的新议程。

拥抱AI+XR,正是奥运会融入这一代年轻人的数字生活的重要举措。当奥运会积极融入这一代人的数字化生活中时,科技对人类生活的重塑正在不断深入,“更快、更高、更强”。

奥运火炬,熊熊不息;技术进化,永无止境。

3 阅读:127

雷科技

简介:专注AI硬科技