北京冬奥会mv推广的主题(北京冬奥会黑科技)

数百名儿童举着和平鸽模型在舞台上自由奔跑,脚下踩着雪花。它们时而散开,时而汇聚,星光也随着孩子们的脚步流淌……
“这些雪花效果是怎么做出来的?为什么和演员合作那么精准自然?”2月4日,北京2022年冬奥会开幕式上,演员与脚下“屏幕”的互动,给观众带来了前所未有的“魔幻”体验。
不仅仅是雪花,还有火焰、波浪等各种效果。这些效果有一个技术术语叫——“AI实时视频特效”。酷炫的视效背后是一套实时捕捉和交互系统,可以实时捕捉演员的位置和姿态,渲染相应的艺术效果。
新京报记者获悉,这种技术以前很少使用。它不仅是“科技冬奥”的典型体现,也是北京2022年冬奥会开幕式的一大亮点。在这项技术的帮助下,演员可以在赛场上自由发挥。“演员可以不按预设路线移动,所以有更大的表演空间和自由度。”
本次AI实时视频特效工作由北京电影学院声音学院师生团队承担。他们就像一个“智囊团”,基于人工智能和游戏引擎技术,在多个环节为不同的节目提供实时的表演特效。在这个开幕式的背后,技术是如何与艺术对话的?这些“技术娴熟”的团队成员向新京报记者透露了开幕式背后的高科技。
《致敬人民》节目开幕式AI实时视频特效,北京电影学院声音学院师生团队制作。图/新京报记者吴辉
该算法捕捉到舞台上数百人的精确定位。
在国家体育场(鸟巢),开幕式的整个舞台是一个巨大的屏幕。“AI实时视频特效”的最终效果作为节目的一部分实时呈现在舞台上。
马绍典是团队成员之一。北京电影学院声音学院毕业后留校。马少典告诉记者,“AI实时视频特效”是多种技术的综合应用。包括一些先进的技术,比如人工智能模型训练、游戏引擎、图像合成技术;还要依靠各种成熟的综合技术,包括图像采集、网络通信等等。
第一个难点在于如何准确跟踪和捕捉场上几十人、几百人的实时位置和状态。记者了解到,这项技术此前从未大规模应用过,团队为此开幕式做了大量的实验研究和调整优化。
据悉,传统舞台的定位技术有很多,包括雷达扫描技术和电磁波定位技术。在电影和电视中,传感器通常附着在人身上,以捕捉他们在空间中的位置。
与“AI实时视频特效”不同,这项技术的原理是图像识别。“一般来说,对要扫描的区域安装摄像头,通过AI系统实时分析其拍摄的图像,确定人的坐标。”
其中需要AI模型训练。“原理是,通过前期海量的图像采集,将视频数据提交给AI训练系统,AI模型可以自我学习和进化,从而形成与本次表演高度相关的识别模式,让系统更准确地识别。”马绍典说。
通常摄像头采集图像并输入系统算法,然后将算法的反馈输出到屏幕,需要一个反应时间。“因此,实现画面艺术效果与每个演员动作的实时同步,让观众看起来效果是在跟人走,是整个项目的一个技术难点。”
对此,团队“多管齐下”解决延迟问题。一方面严格选择设备,保证数据一个一个的传输,尽量减少设备带来的延迟;另一方面,根据鸟巢赛段的特殊场地条件优化算法,弥补之前实验室环境的意外延迟;此外,通过优化和调整艺术渲染生成的图案以及它们被触发的方式,最终的渲染效果将更好
《雪花》节目开幕式AI实时视频特效。几百个孩子在舞台上奔跑,踩在脚下的雪花跟着孩子们的脚步。视频/新京报记者吴辉
不同于传统的舞美,AI技术给了演员更多的自由。
“只有通过AI技术才能获得相对精确的坐标,但这无法呈现给观众,观众也不愿意看几十万个坐标和代码。”马少典开玩笑说。
所以最后的艺术效果呈现也是“AI实时视频特效”中非常重要的一环。经过AI识别后,依靠算法按照预设的规则实时渲染,最终生成图片。
马绍典告诉记者,这部分工作由多个美术团队共同完成。“根据导演的想象,不同的美术团队先为不同的节目制作传统美术底图素材。我们将这些素材整合到实时平台中,并在此基础上加入与人相关的互动效果。”
这与传统的舞台表演有着本质的区别。“传统模式下,通常会提前做一个视频,在屏幕上播放,让演员提前记住视频画面和播放进度,然后好好练习,包括哪里快,哪里慢,哪里转,在相应的时间点移动到相应的位置。”
借助AI实时视频特效技术,演员可以在赛场上自由发挥。“演员可以不按预设路线移动,所以有更大的表演空间和自由度。”这不仅能更好地实现导演的创意和想象力,普通观众也能直观地感受到这种表演的自由和灵动。“观众也能感觉到,这样的表演,仅靠辛苦的排练是很难完成的。”
马绍典举例说,北京2008年奥运会开幕式中,很多气势磅礴的表演都有确定的时间点和节奏,每个人的动作都是整齐划一或者有既定的规则。在北京2022年冬奥会开幕式上,导演希望在精准和标准化之外融入更多个性化的呈现。
“几百个孩子在舞台上自由奔跑。很难要求每个孩子都准确地记住位置。要让每一个孩子自由玩耍,自发表达,而不被牵着走,就更难了。”在马绍典看来,演员在自由表演的时候,会有一种气场和活力,这是区别于传统表演的。
在多次排练中,他也明显感觉到这种技术是“通用的”,不依赖于人身上绑定传感器。无论大人小孩,无论年龄职业,包括不小心撞到屏幕的人,都可以实现实时互动。“就像一个人人都可以参与的游戏,很有感染力和吸引力。”
团队成员“各有特长”,齐心协力,呈现实时互动艺术的独特魅力。
在一次次的效果调整中,导演往往采用艺术语言,给出的指导或反馈往往是抽象的。因此,如何将导演给出的抽象指导准确地翻译或转化为实际的艺术效果,并找到合适的技术方案,也是团队面临的一个挑战。
对此,团队的回应是每次多准备几个方案,让导演在对比中找感觉。“导演可能会告诉我们每一个方案都不理想,但是哪个相对更接近他心目中想要的,或者给一些提示,然后我们就会慢慢向导演给的方向靠拢。”
有时候这些方案会给导演意想不到的“惊喜”。团队给的效果一经呈现,出乎导演意料,却激发了导演的灵感:“原来这个工具还能这么玩!”马少典说,如果某个效果能更好地表达导演的创意,导演也很擅长将实时互动的特效融入到作品中,调整编曲的思路。
“这个项目比较复杂,既要知道系统架构,又要知道算法,还要知道视觉合成,甚至还要精通不同播出系统的色彩管理.这些技术问题需要整合多个专业人员来完成。”马绍典说。
这个团队的工作人员来自北京电影学院的声音学院,正好可以胜任这个专业角色。团队成员不到10人,一半是老师,一半是学生,最小的是高三。
这些成员大多有跨学科背景,可以说都是“技术娴熟”的。有的同学擅长视频后期处理,有的同学有计算机背景,在搭建系统等技术工作上会得心应手;团队部分成员擅长艺术效果设计,尤其在实时交互平台方面经验丰富;其他成员擅长将底层代码与艺术效果联系起来,并将数据转换为视觉作品.每个人分工不同,各有侧重。
“我热爱工程和艺术”马绍典的本科专业是道路桥梁与过河工程,研究生考上了北京电影学院。他隐约觉得,未来的艺术项目不能简单地靠有一个想法来呈现,而是需要大量与技术的对话。考上北京电影学院后,他发现在培养过程中,学校确实鼓励学生发展综合素养,而不仅仅是学习书本上的知识和技能。
“虽然我之前参加过国家大型活动,但承担这种实时互动作品的系统设计和现场操作,确实是第一次。”马绍典告诉记者,在如此大型的国家级演出中,实时互动特效能够成为整场演出中不可或缺的元素,向世界观众展示实时互动艺术的独特魅力,让他们感到欣慰。
新京报记者冯琦编辑吴校对傅春雨

综合资源

图片仓库,100平米仓库买什么摄像头

2024-1-15 12:57:48

好玩下载

万年历最新版下载

2023-11-23 16:30:11

购物车
优惠劵
搜索