从Epic Games到影谱科技,以AI定义视听行业未来

犀牛娱乐原创

文|胖部 编辑|夏添


在各种关于未来的想象里,人工智能(AI)始终是最重要的意象之一。《生化危机》里“红后”,《她》里让男主角为之疯狂的“萨曼莎”OS1,《钢铁侠》最可信任的智能管家贾维斯,人类只需对他们开口,就能完成最复杂的工作。


这样的梦想正在接近现实,尤其是在娱乐视听行业。


此前北美投资人Matthew Ball在分析科技巨头Epic Games时,将其虚幻引擎技术单独拿出来介绍,认为这部分技术正在支撑起公司未来的想象力。


所谓虚幻引擎,是Epic Games开发的一款第三方引擎,简单来说就是一个全能广泛的套装软件,它可以让用户发挥自己的想象力,创造虚拟数字体验。过去需要一个资深工程团队花几年设计底层代码的项目,现在团队只需要专注于创意即可,复杂的编程交给虚幻引擎做自动化生成。


从Epic Games到影谱科技,以AI定义视听行业未来


“虚幻引擎的最终目标是使内容制作者们更有效率,让一个预算很少的几人团队有可能打造出跨时代的高质量游戏。”Epic Games的创始人、CEO Tim Sweeney这样介绍这个技术平台。


发力自动化生成内容的不只是游戏行业。迪士尼开发了一个系统,可以从自然语言故事中提取信息,初步自动生成简单动画,通过VR影像提供“亲临”影片故事场景的体验,这项技术将应用在电影的创作和拍摄中。


而在中国,影谱科技(Moviebook)实现影像内容生产制作的Motion Capture from Video System(从视频中捕获动作,MCVS)框架,让机器直接模仿大量已存视频片段来学习,允许数据为驱动的模仿以生成视频内容。这方面的技术研究,让中国在未来的影像自动化领域取得了先发优势。


未来式视听体验:

当下应用与想象空间



在游戏行业,虚幻引擎常被认为最适用于开发视觉效果丰富的游戏。


相比于更加灵活、适用于开发手游的Unity,虚幻引擎所带来的极致的图形保真度或顶尖的物理体感,吸引了许多头部游戏的发行商。例如任天堂2019年的Switch游戏《Yoshi's Crafted World》使用了虚幻引擎,Square Enix 的《王国之心3》和《最终幻想7》重制版也是如此。


从Epic Games到影谱科技,以AI定义视听行业未来


尤其是对新工作室来说,从零开始制作专有引擎,同时还要打造新的热门游戏,成为进入这个行业天然的门槛。“现在建立一个引擎的成本是数亿美元,代表了数百人多年的工作。你不能再建造一个只适合一种类型游戏的引擎,这在经济角度上是行不通的。”Tim Sweeney表示。虚幻引擎为他们打开了进入行业的大门。


当以虚幻引擎为代表的自动化生成系统快速发展,其应用空间正延伸到游戏行业之外。实现所谓“实时虚拟生产”的游戏引擎成为动画和实景视频结合的未来,比如迪士尼2019年的爆款《曼达洛人》几乎是基于虚幻引擎拍摄的。


《曼达洛人》的全部场景,从冰雪世界,到纳瓦罗沙漠星球和索贡森林,几乎都是在加州曼哈顿海滩的一个虚拟舞台上拍摄的。虚幻引擎让导演只需要一半的预算,就实现了电影级的视觉效果和两倍以上的时间优化,而且非常灵活,导演乔恩-法夫罗可以完美地控制每个镜头的元素,哪怕一朵云的走向。


从Epic Games到影谱科技,以AI定义视听行业未来


这让疫情期间的迪士尼避免了拍摄场地和人数的限制。而对于整个影视工业来说,这样的虚拟生产内容的技术正在打开更多可能性,比如由于《曼达洛人》中的虚构世界是运用虚幻引擎构建的,其场景和人物可以更容易地过渡到视频游戏或VR体验中。


国内类似的技术并不落后,影谱科技就是典型代表企业。有消息称,影谱科技也参与了Epic Games的投资。


从Epic Games到影谱科技,以AI定义视听行业未来


对比影谱科技的MCVS相关产品和虚幻引擎,不同点首先在于应用场景,后者聚焦于游戏,影谱科技主要发力影像自动化生产,同时Epic Games不仅仅是提供服务的技术平台,还作为游戏发行商产出了《堡垒之夜》《绝地求生》等游戏。但在技术领域的引领意义上,双方都在尝试以自动化技术将生产者从繁琐的技术领域解放出来,打开行业内容生产的想象空间。


在视听行业的未来,影谱科技的价值或许在于从技术层面上提供了一个入口,让国内的从业者在技术引导的下一个内容时代取得先发优势。


AGC内容将登场

影谱科技的数字化应用场景



在2021年,各大平台还在构建以UGC和PGC为主的内容生态。但或许五年后,AGC内容将成为内容领域的关键玩家。


所谓AGC就是“Automatic Generated Content”(智能生产内容),最突出优势在于提升生产效率、降低生产成本,并进一步革新生产方式。


影谱科技的AGC智能影像自动生产解决方案称为MAGC,根据其公开的实践数据,影谱科技AI生成引擎生成一段60s视频的总成本与传统方式相比降低79.8%以上,而生产率最高可以提高百倍以上;检索一段60s视频内相似帧图像或特定图像,MAGC 2.0所需总成本与人工相比降低99.73%,而错误率降低10倍以上。


同时,结合虚幻引擎打造《曼达洛人》的例子可以看到,AGC内容生产在很大程度上降低了生产难度,进一步打开了内容创作的可能性。


从Epic Games到影谱科技,以AI定义视听行业未来


当娱乐视听行业遇上AI影像自动化生产技术,这天然成为一次行业生产力解放的迭代,通过重新构想人与机器交互的方式,人工智能作为工作者、内容创建者和消费者,为产业数字化转型升级和商业创新方面带来重要支撑。


技术的升级还在带来更多可能性。去年底,影谱科技推出了基于人工智能技术的数字孪生引擎MADT(Moviebook Auto Digital Twin),所谓数字孪生(Digital Twin),表示是在虚拟空间中完成现实物体的超现实映射,从而反映相对应的实体装备的全生命周期过程。


这是继其智能影像生成引擎MAGC之后又一AI生成引擎,是国内首款融合AI+5G的3D数字孪生引擎。基于基础设施升级提供的迭代服务,让影谱科技的数字孪生技术应用场景更加普遍。


比如MADT打造的数字孪生课堂,让学生和老师可以远程使用交互式虚拟环境,这让疫情期间的师生们可以获得一个更真实的“课堂”。又如新零售产业,零售商使用MADT来升级其在线零售店铺及商品管理,让更多的客户获得与线下一致的互动购物体验。


从Epic Games到影谱科技,以AI定义视听行业未来


而对于娱乐视听行业而言,MADT的技术升级与更多应用场景也提供了全新的增长机遇。长期以来数字孪生技术主要应用于游戏娱乐和电影工业,比如影视特效、3D游戏等,但随着产业数字化进程的加速,数字孪生技术的内容主体正在向产业广泛的商业应用迈进,而这些内容或可通过技术的底层逻辑共通,与娱乐内容实现更多的联动可能性。


AI自动化成新蓝海

搭建行业未来的基础设施



去年12月,广电总局印发了《广播电视技术迭代实施方案(2020-2022年)》,明确在媒体领域推进融合媒体内容生产便捷化和智慧化,提升媒体内容生产力和新闻报道的时效性。在具体措施方面,特别提到了“推进人工智能技术在内容制作、智能剪辑等方面的应用”等。


作为广电数字化升级的重要基础技术,“AI内容制作技术”首次被监管机构提至战略高度。这代表着行业政策端对AI自动化技术的肯定。


这种肯定的基础首先在于技术是否稳定、安全、真正承载业务等应用性方面,2020年年初,Garnet就发布了《2020人工智能技术成熟度曲线报告》,指出AI生成的技术成熟度已符合商业化应用爆发的能力。


从Epic Games到影谱科技,以AI定义视听行业未来


其次,技术投入实践应用的表现,也已经印证了其提升效率、降低成本、优化创作能力方面的优势,并逐渐在AI内容制作、内容治理、内容商业化方面形成了全链条的良性循环。


2020年芒果TV热播的综艺《乘风破浪的姐姐》中,影谱科技作为其视觉技术独家合作伙伴,通过AI影像自动生产引擎助力该节目的商业化触达。从效果来看,非标视频素材生成只需要建立一个任务,就能在数百剧集中完成一键植入内容,并可以区分传统包装类、节目内曝光类、以及简单的情节交互类等不同类型。


从Epic Games到影谱科技,以AI定义视听行业未来


另一个重要的应用领域就是虚拟数字人,包括各大娱乐平台正在发力的虚拟偶像,本质就是AI生成技术所创建的多模态影像。广电总局的《方案》中将“开展虚拟主播的规模应用”列为近期任务,而影谱科技的AI生成技术被认为是创建、运营虚拟数字人的关键底层技术。


或许在当下,想象直接通过AI的自动化生成技术制作电影、剧集,似乎还带有一些科幻性质。但在影谱科技,其技术的开发和迭代,已经在打开行业生产和商业化前景的可能性,为行业的未来式打造基础设施和底层土壤。视听行业发展的未来,这些先验性科技的价值或将在更多维度上获得指数级增长。

展开阅读全文

页面更新:2024-03-10

标签:视听   未来   行业   科技   人工智能   虚幻   场景   影像   定义   数字   引擎   更多   内容   技术   游戏   视频

1 2 3 4 5

上滑加载更多 ↓
推荐阅读:
友情链接:
更多:

本站资料均由网友自行发布提供,仅用于学习交流。如有版权问题,请与我联系,QQ:4156828  

© CopyRight 2020-2024 All Rights Reserved. Powered By 71396.com 闽ICP备11008920号-4
闽公网安备35020302034903号

Top