从Epic Games到影谱科技，以AI定义视听行业未来

时间：2022-06-04 10:54:02 | 来源：行业动态

时间：2022-06-04 10:54:02 来源：行业动态

犀牛娱乐原创

文｜胖部 编辑｜夏添

在各种关于未来的想象里，人工智能（AI）始终是最重要的意象之一。《生化危机》里“红后”，《她》里让男主角为之疯狂的“萨曼莎”OS1，《钢铁侠》最可信任的智能管家贾维斯，人类只需对他们开口，就能完成最复杂的工作。

这样的梦想正在接近现实，尤其是在娱乐视听行业。

此前北美投资人Matthew Ball在分析科技巨头Epic Games时，将其虚幻引擎技术单独拿出来介绍，认为这部分技术正在支撑起公司未来的想象力。

所谓虚幻引擎，是Epic Games开发的一款第三方引擎，简单来说就是一个全能广泛的套装软件，它可以让用户发挥自己的想象力，创造虚拟数字体验。过去需要一个资深工程团队花几年设计底层代码的项目，现在团队只需要专注于创意即可，复杂的编程交给虚幻引擎做自动化生成。



“虚幻引擎的最终目标是使内容制作者们更有效率，让一个预算很少的几人团队有可能打造出跨时代的高质量游戏。”Epic Games的创始人、CEO Tim Sweeney这样介绍这个技术平台。

发力自动化生成内容的不只是游戏行业。迪士尼开发了一个系统,可以从自然语言故事中提取信息，初步自动生成简单动画，通过VR影像提供“亲临”影片故事场景的体验，这项技术将应用在电影的创作和拍摄中。

而在中国，影谱科技（Moviebook）实现影像内容生产制作的Motion Capture from Video System（从视频中捕获动作，MCVS）框架，让机器直接模仿大量已存视频片段来学习，允许数据为驱动的模仿以生成视频内容。这方面的技术研究，让中国在未来的影像自动化领域取得了先发优势。

未来式视听体验：

当下应用与想象空间

在游戏行业，虚幻引擎常被认为最适用于开发视觉效果丰富的游戏。

相比于更加灵活、适用于开发手游的Unity，虚幻引擎所带来的极致的图形保真度或顶尖的物理体感，吸引了许多头部游戏的发行商。例如任天堂2019年的Switch游戏《Yoshi's Crafted World》使用了虚幻引擎，Square Enix 的《王国之心3》和《最终幻想7》重制版也是如此。



尤其是对新工作室来说，从零开始制作专有引擎，同时还要打造新的热门游戏，成为进入这个行业天然的门槛。“现在建立一个引擎的成本是数亿美元，代表了数百人多年的工作。你不能再建造一个只适合一种类型游戏的引擎，这在经济角度上是行不通的。”Tim Sweeney表示。虚幻引擎为他们打开了进入行业的大门。

当以虚幻引擎为代表的自动化生成系统快速发展，其应用空间正延伸到游戏行业之外。实现所谓“实时虚拟生产”的游戏引擎成为动画和实景视频结合的未来，比如迪士尼2019年的爆款《曼达洛人》几乎是基于虚幻引擎拍摄的。

《曼达洛人》的全部场景，从冰雪世界，到纳瓦罗沙漠星球和索贡森林，几乎都是在加州曼哈顿海滩的一个虚拟舞台上拍摄的。虚幻引擎让导演只需要一半的预算，就实现了电影级的视觉效果和两倍以上的时间优化，而且非常灵活，导演乔恩-法夫罗可以完美地控制每个镜头的元素，哪怕一朵云的走向。



这让疫情期间的迪士尼避免了拍摄场地和人数的限制。而对于整个影视工业来说，这样的虚拟生产内容的技术正在打开更多可能性，比如由于《曼达洛人》中的虚构世界是运用虚幻引擎构建的，其场景和人物可以更容易地过渡到视频游戏或VR体验中。

国内类似的技术并不落后，影谱科技就是典型代表企业。有消息称，影谱科技也参与了Epic Games的投资。



对比影谱科技的MCVS相关产品和虚幻引擎，不同点首先在于应用场景，后者聚焦于游戏，影谱科技主要发力影像自动化生产，同时Epic Games不仅仅是提供服务的技术平台，还作为游戏发行商产出了《堡垒之夜》《绝地求生》等游戏。但在技术领域的引领意义上，双方都在尝试以自动化技术将生产者从繁琐的技术领域解放出来，打开行业内容生产的想象空间。

在视听行业的未来，影谱科技的价值或许在于从技术层面上提供了一个入口，让国内的从业者在技术引导的下一个内容时代取得先发优势。

AGC内容将登场

影谱科技的数字化应用场景

在2021年，各大平台还在构建以UGC和PGC为主的内容生态。但或许五年后，AGC内容将成为内容领域的关键玩家。

所谓AGC就是“Automatic Generated Content”（智能生产内容），最突出优势在于提升生产效率、降低生产成本，并进一步革新生产方式。

影谱科技的AGC智能影像自动生产解决方案称为MAGC，根据其公开的实践数据，影谱科技AI生成引擎生成一段60s视频的总成本与传统方式相比降低79.8%以上，而生产率最高可以提高百倍以上；检索一段60s视频内相似帧图像或特定图像，MAGC 2.0所需总成本与人工相比降低99.73%，而错误率降低10倍以上。

同时，结合虚幻引擎打造《曼达洛人》的例子可以看到，AGC内容生产在很大程度上降低了生产难度，进一步打开了内容创作的可能性。



当娱乐视听行业遇上AI影像自动化生产技术，这天然成为一次行业生产力解放的迭代，通过重新构想人与机器交互的方式，人工智能作为工作者、内容创建者和消费者，为产业数字化转型升级和商业创新方面带来重要支撑。

技术的升级还在带来更多可能性。去年底，影谱科技推出了基于人工智能技术的数字孪生引擎MADT（Moviebook Auto Digital Twin），所谓数字孪生（Digital Twin），表示是在虚拟空间中完成现实物体的超现实映射，从而反映相对应的实体装备的全生命周期过程。

这是继其智能影像生成引擎MAGC之后又一AI生成引擎，是国内首款融合AI 5G的3D数字孪生引擎。基于基础设施升级提供的迭代服务，让影谱科技的数字孪生技术应用场景更加普遍。

比如MADT打造的数字孪生课堂，让学生和老师可以远程使用交互式虚拟环境，这让疫情期间的师生们可以获得一个更真实的“课堂”。又如新零售产业，零售商使用MADT来升级其在线零售店铺及商品管理，让更多的客户获得与线下一致的互动购物体验。



而对于娱乐视听行业而言，MADT的技术升级与更多应用场景也提供了全新的增长机遇。长期以来数字孪生技术主要应用于游戏娱乐和电影工业，比如影视特效、3D游戏等，但随着产业数字化进程的加速，数字孪生技术的内容主体正在向产业广泛的商业应用迈进，而这些内容或可通过技术的底层逻辑共通，与娱乐内容实现更多的联动可能性。

AI自动化成新蓝海

搭建行业未来的基础设施

去年12月，广电总局印发了《广播电视技术迭代实施方案（2020-2022年）》，明确在媒体领域推进融合媒体内容生产便捷化和智慧化，提升媒体内容生产力和新闻报道的时效性。在具体措施方面，特别提到了“推进人工智能技术在内容制作、智能剪辑等方面的应用”等。

作为广电数字化升级的重要基础技术，“AI内容制作技术”首次被监管机构提至战略高度。这代表着行业政策端对AI自动化技术的肯定。

这种肯定的基础首先在于技术是否稳定、安全、真正承载业务等应用性方面，2020年年初，Garnet就发布了《2020人工智能技术成熟度曲线报告》，指出AI生成的技术成熟度已符合商业化应用爆发的能力。



其次，技术投入实践应用的表现，也已经印证了其提升效率、降低成本、优化创作能力方面的优势，并逐渐在AI内容制作、内容治理、内容商业化方面形成了全链条的良性循环。

2020年芒果TV热播的综艺《乘风破浪的姐姐》中，影谱科技作为其视觉技术独家合作伙伴，通过AI影像自动生产引擎助力该节目的商业化触达。从效果来看，非标视频素材生成只需要建立一个任务，就能在数百剧集中完成一键植入内容，并可以区分传统包装类、节目内曝光类、以及简单的情节交互类等不同类型。



另一个重要的应用领域就是虚拟数字人，包括各大娱乐平台正在发力的虚拟偶像，本质就是AI生成技术所创建的多模态影像。广电总局的《方案》中将“开展虚拟主播的规模应用”列为近期任务，而影谱科技的AI生成技术被认为是创建、运营虚拟数字人的关键底层技术。

或许在当下，想象直接通过AI的自动化生成技术制作电影、剧集，似乎还带有一些科幻性质。但在影谱科技，其技术的开发和迭代，已经在打开行业生产和商业化前景的可能性，为行业的未来式打造基础设施和底层土壤。视听行业发展的未来，这些先验性科技的价值或将在更多维度上获得指数级增长。