估值暴涨3倍,《瞬息全宇宙》幕后公司Runway引领AI影视新时代

2023-06-15 18:22

近日，生成式AI平台Runway在谷歌领投的D轮融资中募集到约一亿美元。Runway不仅是投资界的新星，其产品RunwayML参与制作的《瞬息全宇宙》也在不久前斩获了奥斯卡最佳女主角奖。

“这是一个神奇的世界，留给人类的是千变万化的瞬间。”正如电影里台词阐述的那样，Runway旗下的视频编辑工具Gen-2展现了AI将文本转化为视频世界的魔力与神奇，只需要输入短短几个词语或者一句话的描绘，就能为我们生成想要的视频画面。

视频是当代社会内容媒体的重要组成部分，而TikTok、Instagram、Snapchat和YouTube等视频应用也是过去几年下载量最高的应用之一。而短视频更符合现代人在快节奏与高信息密度下利用碎片化时间的娱乐需求，垂直细分领域亦是短视频的发展趋势，Runway恰好满足二者。

下面我们将探究Runway的发展历程，并介绍旗下核心产品与独特技术，并结合AIGC与其对国内外娱乐行业的影响进行分析。

Runway崛起之路

Runway是福布斯公布的2023年度AI 50榜单最值得关注的上榜公司之一，但他的崛起绝不是一蹴而就，而是经历了巧合与必然。

求学阶段

Runway是由Cristóbal Valenzuela（CEO）、Anastailities Germanidis（CTO）和Alejandro Matamala Ortiz（CDO）于2018年创立。

（Runway的创始人：Anastailities Germanidis（上），Alejandro Matamala Ortiz（左）和Cristóbal Valenzuela（右）在曼哈顿）

在创办公司前，Valenzuela花费大量时间了解计算机如何应用于视觉艺术。他虽然只拥有经济学背景，却痴迷于电脑的艺术创造力，并好奇信息技术能够使艺术家对图像与视频产生何种结果。

因此，他在搬家去纽约后，报名攻读了纽约大学的ITP（交互电子媒体）专业。这是一个为期2年的知名硕士项目，主要培养学生去探索新科技，并与其他学科交互，从而改善人类生活。

Valenzuela在纽约大学研究ML模型在创意领域中图像和视频分割的应用方面时，结识了另外两名创始人。

他们在学习ImageNet和AlexNet后，意识到世界有大事即将发生，但没有人去做，那为什么不选择自己去做呢？

雏形初现

最初他们只专注于学术道路，而在进行论文研究时，Valenzuela意识到完美的学术假想只会成为实践的泡沫，于是他开始更多地与艺术行业人员进行交流，在学校开始了第一个在Photoshop和Premiere中建立了一系列实验和集成的研究项目，并受到外界的鼓舞。

Adobe的人工智能团队也向他们抛出了橄榄枝，但他们想要的是控制整个创造流程，而不是根据既定的路线去创造。Valenzuela认为Premiere和Final Cut只是服务于旧媒体时代专业人员创作影音的工具，并非为短视频时代下个人服务的视频工具。于是，他们产生了成立公司的想法。

很快，在2018年，Runway首先被作为一个模型应用商店推出，使用户能够针对各种用例部选择机器学习模型，产品特色是应用可视化界面抽象了原本的推理和训练过程。

随着模型目录和用户群的不断增长，团队开始看到在视频编辑中出现了一种特别的使用模式。许多视频编辑和电影制作人使用Runway，是因为他们发现了利用模型能够完成自动化繁琐工作流程的潜力。

于是Runway开始尝试利用其模型目录中的知识，围绕视频编辑进行更深入的构建。整个团队意识到他们正在削减制作视频的时间和成本，并使ML视频编辑变得人人皆可参与。就在那时，他们改变了策略，决定致力于构建即时视频生成工具。

大获成功

Runway被定义为下一代视频创作者的新工具。Valenzuela表示在艺术创意中，人们永远无法找到能做一切事情的工具，但Runway却是一款根据人们的问题与洞察力而提供帮助的工具，旨在减少人们制作视频的繁琐与麻烦。

Runway利用市场对生成式人工智能的热情，在连续募集几轮风险投资后，估值达到15亿美元，一跃成为新晋生成式AI独角兽。在今年3月份与亚马逊达成一项大型云协议后，Runway又在不久前与谷歌签署了一项重大的云计算协议，可谓是一呼百应，春风得意。

如今，Runway已成为一款成熟的视频编辑器，可以在浏览器中进行实时协作，并拥有越来越多的AI视频编辑和创建功能。它被成千上万的用户使用，无论是从业余爱好者，还是专业人员。

Runway的产品布局

在Runway，他们相信每个人都有自己的故事。其使命是：让所有人都能进行内容创作。因此该公司正在利用计算机图形学和机器学习的最新进展来突破创造力的界限，从而降低内容创作的障碍，掀起新一波讲故事的浪潮。

在过去的四年里，该公司从顶级投资者那里筹集了资金，团队规模从小到只有容纳一张桌子的人数，到团队成员来自各行各业并富有创造力，多年来致力于人工智能视频编辑软件的研发。

Runway的产品和技术有很多，Runway创业之初的产品形态是一个关于ML（机器学习）模型的应用商店，用户可以在这上面使用数百个模型，比如StyleGAN模型。

随后Runway基于新的AI算法发布大约30余个AI创作工具，包含音频、图片、视频、3D和生成五个大类，涵盖了几乎所有的音视频内容生成和处理工具。

此外，RunwayML作为全球首款AI生成视频软件，是其向传统内容平台和移动端进军的表率。它除了提供一整套多模态人工智能工具库之外，该工具库还推出图像修复、绿幕修图、运动跟踪三大核心功能，可谓是将黑科技直接拉满，效果炸裂的程度。

如今，Runway的核心产品为视频编辑器Gen-1和Gen-2。Gen-1模型可以通过输入文本或图像，改变原视频的风格，例如将现实中的实拍镜头转换为卡通剪纸世界。Gen-2模型可以直接使用文本生成视频场景，使用户可以使用文本提示生成“逼真的视频内容”并“自动剪辑视频”。

Runway的产品和技术不言而喻，其客户除了包含许多知名品牌和机构以外，例如Adobe、Facebook、Google、Netflix和The New York Times等，还有抖音和YouTube用户以及主流电影和电视剧工作室都在使用该公司的创造，被广泛应用于电影、电视和广告等领域。例如：《黑寡妇》中的特效制作；斯蒂芬-科尔伯特主持的《深夜秀》；《瞬息全宇宙》狂拽酷炫的视觉效果等等。

其应用领域的扩展背后是产业面临的巨大变革，作为视频领域的“神奇魔法”，Runway等工具受到了影视制作行业的欢迎，但并非所有人都对AI表示欢迎。

编剧抵制，特效最爱

随着AI工具火遍全球，人们的生活的确变得更加便捷，但这也导致了文案、编剧等文字类工作者面临失业。公司用AI写剧本，这不仅是在抢编剧们的饭碗，同时也贬低了“人类劳动的尊严和价值”。

导演郭帆表示，“《流浪地球》第三季如果拍摄的话，现场可能至少一半以上的人会减少掉。人工智能对我们来说既是挑战，也是机遇，可能是我们弯道超车好莱坞的机会。”

目前在好莱坞，制片方出于成本考量，已经在大量使用AI进行创作。据媒体此前报道，AI机器在学习某热门美剧的剧情后，已经可以为新一季的第一集撰写剧本大纲。

这种利用AI进行创作的行为却引发了美国好莱坞编剧工会（WGA）数千名电影和电视编剧的强烈抵制，他们抗议收入过低和AI越来越多地取代人类参与剧本写作的现象。《黑镜》主创查理·布洛克在接受采访时说，他曾经用ChatGPT写了一集《黑镜》剧本，结果“跟垃圾一样”。

虽然同属于影视行业，但特效制作者对待AI的态度却截然相反，他们正在积极拥抱AI技术。

斩获奥斯卡金像奖的《瞬息全宇宙》的特效团队便是在AI技术的加持下，仅靠五人就完成了后期制作，其中名场面 “热狗手”还获得了业内外的一致好评。

这个成功的案例表明，AI技术在影视创作中的潜力是巨大的，也是不可忽视的。为了探讨AI技术如何改变影视行业的未来，最近，非营利组织AI LA在洛杉矶举办了“AI on the Lot”会议，最终得到“人工智能的时代已经到来”和“所有创意工作人员都应该学会使用它”这两个结论。

趋势不可挡，技术革新的车轮滚滚而过，AI的入侵大戏已在好莱坞悄然上演。

AI公司正在入侵好莱坞

的确，人工智能的时代已经到来，并且它正在改变着影视行业的游戏规则，越来越多的AIGC公司已蓄势待发，为影视制作带来全新的灵感。

Deep Voodoo

Deep Voodoo由知名动画剧集《南方公园》的创作者Trey Parker和Matt Stone创办，专注于开发Deepfake技术的视效服务和合成媒体技术项目。

Deepfake是一种利用深度学习等机器学习方法创建或合成视听觉内容的技术，这种技术可以将已有的图像或视频中的人脸或表情替换成目标人物，从而达到伪造身份或表情的目的。

该公司的换脸技术自推出以来便广受关注，比如说唱歌手Kendrick Lamar的《The Heart Part 5》MV以及篮球巨星科比的换脸视频。

Metaphysic

同样利用Deepfake技术进行视频创作的还有Metaphysic，该公司曾在去年9月利用Deepfake让已经故去多年的猫王登上了《美国达人秀》的舞台。

此外，在经典电影《阿甘正传》原班人马合作的新片中，该公司将利用AI技术对主角汤姆·汉克斯和罗宾·怀特的面部进行年轻化还原。

MARZ

MARZ作为漫威剧集《旺达幻视》以及Netflix剧集《太阳召唤》背后的视效工作室，开发了基于AI的视效工具“Vanity AI”。

Vanity AI可以自动地完成2D的老化、年轻化、美容、假发和假肢等视效修饰，大大缩短了制作时间和成本。

此外，MARZ公司的COO Matt Panousis认为配音和画面不同步的问题是内容无法得到更好传播的主要原因之一，因此该公司正着手开发一项用于解决音画不同步问题的工具，这种工具将能帮助传媒公司们更好地放眼海外以寻求更大的发展。

Respeecher

Respeecher是一家乌克兰的初创公司，成立于2018年，擅长运用AI技术“克隆”陈旧影像档案中演员的声音，然后用于新的电影或游戏制作中。在去年Disney+推出的剧集《欧比旺·克诺比》里，Respeecher就成功“克隆”了黑武士的标志性呼吸声。

同样，在另一部改编自《星球大战》、由卢卡斯影业打造的剧集《波巴·费特之书》里，Respeecher也还原了卢克·天行者的声音。

此外，在2021年赢得艾美奖的纪录短片《Event of Moon Disaster》里，Respeecher也利用机器学习技术来处理了1969年尼克松关于阿波罗11号任务的演讲的画面和声音。

除了上述的几家公司，还有一些AIGC公司也正在改变着影视和动画行业。比如利用生成式AI技术为外语电影和剧集重新进行本地语言配音的Deepdub，以智能计算机视觉技术、光场技术、深度学习技术为核心的中国公司叠境数字（DGene），以及由参演过《X战警》和《头号玩家》的明星Tye Sheridan和动画特效专家Nikola Todorovic联合创立的公司Wonder Dynamics等

Stay hungry，stay foolish

Runway的创业成功符合当下生成式AI潮流与短视频媒体时代背景，很难说不属于过程顺势而为，结果水到渠成。

“每个平行世界的我们都存在着无限可能。“伊芙琳在电影中的感叹是不是也能印证到Runway创始人的职业生涯中？他拒绝加入谷歌，如今带领Runway又与谷歌展开紧密合作。