深度|谁正在AI上超越OpenAI和Google?
初创公司Runway在AI视频领域领先,与Lionsgate达成里程碑式交易,为电影制作人提供资金支持。
3.除此之外,Runway已开发出35种针对视频创作的专业工具,受到好莱坞制作公司的关注。
4.与创意者保持密切联系,Runway将保持领先于竞争对手,逐步融入好莱坞的制作生态系统。
对于创业公司创始人来说,当规模更大的竞争对手侵犯其领域时,有两种基本的应对方式:第一种是低头沉默地前进,第二种是坚定不移地前进。
或者他们可以像Runway的创始人Cristóbal Valenzuela(以下称Valenzuela)以自负的姿态回应,就在当时谷歌和OpenAI进入AI视频领域时,希望让观察者们无法预测这场战争中的输赢。
RunwayCEO并没有坐视不理,默默地发牢骚,而是直接采取了行动。在OpenAI用将近一年的时候,从宣布Sora(这是一种与Runway的视频生成技术竞争的产品,可以根据简单的文本提示生成逼真的视频剪辑)到在12月发布该软件的首个版本之际。
相反,他公开嘲笑了他的竞争对手。我宣布,将会有一个关于即将到来的的公告。他在X上写道,这是对OpenAI倾向于预告尚未准备好向公众发布的未来产品的一种隐喻式的批评。
当我在Sora发布一周后在Runway纽约总部见到他时,Valenzuela维持了他的夸张态度。事实上,他和两位联合创始人Anastasis Germanidis和Alejandro Matamala Ortiz,似乎对OpenAI立即在开发AI视频程序的竞争中被视为获胜者感到相当沮丧,谷歌的Veo 2被视为唯一值得信赖的竞争对手。
Runway拥有数百万的月活跃用户,在AI视频领域已有数年的领先优势。与一家著名的好莱坞电影制作公司Lionsgate的新合作关系刚刚签署。
Runway计划直接为电影制作人提供资金支持,进一步巩固其在娱乐领域的地位。它还从英伟达和通用大西洋等投资者那里获得了数亿美元的投资。
随着文本式聊天机器人在某种程度上提供同样的服务,视频正在迅速成为人工智能的下一个利润丰厚的前景。Runway将他们的初创公司视为行业领导者,OpenAI和谷歌则是过去的竞争对手。
我们认为其他公司正在制造概念车,而我们正在打造一辆真正的汽车,35岁的Valenzuela说,他穿着城市艺术家标准的制服:黑色T恤、黑色牛仔裤、时尚运动鞋。概念车可能是一款漂亮的设计,展示了你认为可以实现的东西。但是生产和销售1000万辆汽车是完全不同的挑战。现在,每个人都着迷于概念车。
由同样制造概念自行车和各种概念产品的公司制造, Matamala Ortiz(40岁)说,他的穿着方式大致与其伴侣相同。
在人工智能领域,是否还有比Runway更离奇背景的初创公司?典型的AI创业公司都是由斯坦福大学或麻省理工学院等高校的深度学习专家创建的。而Runway却是在2018年从纽约大学蒂施艺术学院的一个项目中诞生的,这个学校以培养电影制作人闻名,而非科技企业家。Runway的三位创始人原本都是有艺术梦的人,后来进入了这个领域,出于对新媒体的探索欲望。
然而Runway,去年完成了价值4亿美元的融资,拥有谷歌、英伟达和通用大西洋等著名投资者的阵容。其业务也在快速增长:该公司希望在今年达到3亿美元的年化收入,而在2024年12月已经达到8000万美元的年化收入。这可能会向更广泛的世界证明,建立AI视频模型也可能赚钱。
无疑,Runway如何证明其赚钱潜力同样不可思议:通过说服好莱坞多数人,人工智能实际上对电影和电视行业有益。2022年,Valenzuela开始定期前往好莱坞,以说服持怀疑态度甚至直接敌视的行业。到2024年,他每月在加利福尼亚州花费大约一周的时间,在Burbank、Culver City、贝尔艾尔、圣莫尼卡和好莱坞山分别开展会议。
我将于上午9点开始,并努力每天至少安排6次会议,Valenzuela说。制片人、演员、编剧、导演、行业协会、大型电影制作公司以及制作公司——几乎所有人都参与其中。
好莱坞的普遍观点是,AI意味着只需按下一个开关——就能拥有一部电影。这意味着会消除数以百计的人工工作。相反,Valenzuela一直努力说服好莱坞将Runway视为增强其创造性工作的工具;且Runway比OpenAI和Google发布的工具更适合他们的需求,因为Valenzuela认为后者是为普通用户设计的。这个论点与Adobe一代前说服专业摄影师使用Photoshop和Lightroom的论点并无不同。
在Valenzuela的风暴般的巡演中,他的策略一直是展示Runway的工具可以帮助专业人士以相同的预算完成更雄心勃勃的创作工作的许多实际方法——例如,使制作团队能够创造出在没有人工智能协助的情况下无法实现的电影特技,而不是替换团队本身。
使用Runway的工具,例如,电影制作人可以在摄制结束后改变摄像机角度。他们可以换入一个新的背景,从而节省了为拍摄专门创建一个背景的麻烦和费用。他们可以更改一个角色的服装,如果不合适的话,或者事后给镜头一种手持相机的感觉。他们可以使用一套工具将表情和头部动作施加到卡通人物或著名演员的脸上。
一个总部位于好莱坞的Runway爱好者举了一个电影剧本中一个场景的例子,该场景需要1,000个骑马的中世纪士兵整齐地排列在一座多雪的山坡上。这使用传统特殊效果创作会非常昂贵,但现在通过Runway的AI,以更低的成本实现这一目标已经成为可能。
Valenzuela 的努力在9月份得到了高调的回报,当时狮门影业(幕后制作《基督山伯爵》、《暮光之城》和《饥饿游戏》等系列电影)宣布达成了一项全新的交易,允许Runway在该工作室超过20,000部电影中训练新模型。一般而言,在使用人工智能上进行试验的影视工作室、制作公司和其他机构,害怕被视为支持机器人对抗演员、编剧等人而而避免公开谈论。
没有人想要被盯上,一位公共关系代表解释道,他代表其好莱坞客户拒绝了一个采访请求。
狮门影业交易是一个转折点:电影制作公司,公开采用人工智能技术来制作电影。
如果正确使用,Runway将使得一些以前从未制作过的电影和电视节目得以实现,这是Lionsgate副董事长Michael Burns所说。Burns在2023年11月与Valenzuela共进午餐后表示,工作室将通过使用人工智能节省数百万美元。
我认为这是工业界的一大利器,目前只是冰山一角,伯恩斯说。
这不仅是好莱坞的情况。如今几乎每家大型公司都雇用创意团队为内部和外部使用制作视频,或者他们聘请Monks等全球营销和制作公司,这家公司在几年前开始使用Runway。Debora den Iseger表示:使用Runway的工具,一个过去可能需要50到60人完成的项目,现在只需要15到20人即可完成。制作时间从平均16周缩短到6周。
我们为客户制作的视频能够节省50%至80%的成本,她说。
制作公司和电影制作人可以使用Sora或另一个型号来完成他们可以用Runway完成的大部分工作。OpenAI当然是一家资金更充足、知名度更高的公司,在其员工中拥有一支由研究人员组成的军队,能够与Runway的产品特性相匹敌。但Runway的美好愿景是,它与创意者的关系为其在日益激烈的竞争格局中提供优势,这个竞争格局不仅包括OpenAI和谷歌,还包括Meta Platforms、Adobe、腾讯、字节跳动以及由人工智能研究人员创立并获得顶级风险投资公司资助的众多知名初创公司。
在我与其他人工智能研究实验室会面时,令人惊讶的是,他们对自己试图合作的行业知之甚少,Valenzuela 说。
虽然其竞争对手创造令人印象深刻的模型,但Runway专注于开发电影制作和后期制作流程的专业工具,这些工具已迅速成为行业标准。
他们就像脑外科医生,而不是全科医生,Burns说道Runway的情况。他们真正掌握了这一个专业,这就是为什么他们远远领先于竞争对手。
与钦佩科技创始人和风险投资者的典型硅谷居民不同,Valenzuela在完全不同的世界里寻找自己的英雄。硅谷有这种对创始人和投资者的痴迷,Valenzuela说。我个人真的很兴奋,当我遇到一位传奇电影制作人时。在智利长大时,Valenzuela梦想拍电影。但智利没有太多真正好的电影学校,他说。
相反,他学习了经济和设计,在一家当地咨询公司工作,同时还在业余时间热衷于多媒体艺术装置,并在当地画廊展出。
在2016年,Valenzuela在纽约大学互动通信项目遇到了他的共同创始人。这个项目被形容为工程师的艺术学校和艺术家的工程学校。同样来自智利的马塔马拉·奥尔蒂斯,在19岁时就创办了自己的设计工作室。我当时正在寻找专注于编码和为设计师创造先进工具的方向,他说。
雅典出生的Germanidis拥有计算机科学背景,并将大部分精力投入到计算机辅助艺术的创作中。神经网络方面开始出现这样的趋势,Germanidis说到获得硕士学位的决定,我想成为其中的一员。
梦想的开始时,是Valenzuela的硕士论文——对艺术家可用的各种AI模型进行探索,虽然梦想差点就此终结。Adobe聘请他,提供的薪资是比我家过去10年的总收入还多,Valenzuela说。
他从未想过要创办自己的公司,也不知道如何为一家初创公司筹集资金,更不用说了解任何风险投资公司的名字。当Valenzuela放弃了 Adobe 的工作来继续开发他所创建的项目时,连他自己都感到震惊。
他和马塔马拉·奥尔提斯每月只花费2000美元,在纽约大学工作,而热尔曼尼迪斯则在Zocdoc担任后端工程师。6个月后,热尔曼尼迪斯辞去了工作,加入了他的前同学们。比瓦伦苏埉尔小一岁的热尔曼尼迪斯担任首席技术官,而马塔马拉·奥尔提斯成为首席设计官。
幸运的是,他们不需要弄清楚风险投资就能开始。资金主动找到了他们。Amplify Partners的创始人苏尼尔·达利瓦尔在2018年末与这个团队在蒙特利尔参加那年最大的人工智能会议Neural Information Processing Systems大会时相遇。
他们给人一种清新感,与那些人形成了鲜明对比,那些人说我们是世界上最聪明的计算机科学家;只要我们把1和0正确地排列,每个人都会屈从于我们的意志。达利瓦尔说道。他们不是最AI的人,但他们是我们遇到的最热情和思维最敏捷的创意人。
我们基本上只是乞求他们参与进来。Amplify向Runway的种子轮出资50万美元,成为其中三家投资方之一。
寻找新的投资者将是一个更大的挑战。许多风险投资公司都在从事模式匹配业务,而Runway并不符合任何科技创业公司的模板。风险投资公司会说,你去过某个艺术学校,你永远也不会知道如何建立一家企业,Valenzuela说。
那些最初表现出兴趣的人在进行尽职调查后,似乎更加不确信Runway的潜力。他们说,没有人愿意投资艺术家,因为艺术家没有钱,这意味着没有市场,他说。Runway的技术只能生成模糊和有时失真的图像,这并没有帮助其事业。
在之前的两年里,Runway遭到了超过30次的拒绝,直到2020年12月宣布了一轮850万美元的A轮融资,主要依靠最初的三名投资者。这对我们所有参与的人来说都是一次信任的跳跃,Runway A轮投资者之一Hot or Not的创始人James Hong说,你不得不告诉自己,这仍然很糟糕,但你应该看看上周它是什么样子的。
其他人工智能初创公司大手笔地招揽顶级AI研究人员。相比之下,Runway的首位员工是Brannon Dorsey,他在三年前就在芝加哥艺术学院获得了本科学位。该公司的第二位员工也是一位拥抱技术的艺术家。
Runway于2019年中旬,即成立后仅6个月就发布了首款产品。一旦我们有可用的东西,我们就想把它交到人们手里,Dorsey说。(对OpenAI的嘲讽。)
Runway 的第一个版本是由其他制作艺术家,和其他创意人士使用的开源模型仓库。但很快他们意识到了这些模型的局限性。
我们知道制作高质量视频所需的控制水平,Matamala Ortiz说。我们知道没有对支持它们的全栈的控制,我们无法建立我们设想的应用程序。
如果Runway要成功,它需要同时成为一个研究实验室和一家产品公司。创始人在2021年底又募集了3500万美元,用于在纽约Tribeca地区租办公室(这里是电影和媒体的中心),并增加了研究科学家。
一位特别的新员工是Patrick Esser,他联合撰写了一篇里程碑式的论文,基于潜在扩散模型的高分辨率图像合成,于2022年4月发表。
研究引入了潜在扩散模型,这是一种更高效的高质量图像生成方法。这种方法成为了Stable Diffusion的基础,Stable Diffusion是一款由Stability AI在那个夏天后来发布的开源人工智能图像生成器,它为高质量人工智能图像创建工具民主化提供了便利。
正如他所说,这向更广泛的世界传达了AI视频已不仅仅是玩具的信息。2022年年底,Runway在C轮融资中获得了5000万美元,使公司估值达到5亿美元,随后又获得了1.41亿美元的C轮融资扩展,投资方包括Google、Nvidia和Salesforce。
ChatGPT的发布和对生成式AI的兴趣激增,突出了Runway作为文字到视频技术先驱的地位。
该公司的工具开始在现实世界中留下印记。视觉特效艺术家埃文·哈勒克在制作电影《一切隔离之处》时发现了Runway,这部电影在2023年奥斯卡上获得了七座奖项。
该团队使用Runway制作了电影中一个关键场景中行走在峡谷边缘的大眼睛石头。我只用几分钟就剪切出了人物,并将他们干净地置于拍摄画面上,这比需要半天的工作要快得多,哈勒克在2023年告诉《Variety》。
《史蒂芬·柯尔伯特深夜秀》的喜剧团队开始使用Runway创作视频搞笑段子。《深夜秀》的平面艺术家瑞安·毛斯科普表示:我用5分钟拍摄了一个镜头,通常需要5个小时。你不需要一帧一帧地编辑,只需点击几下就可以完成。
截至2023年中期,在任何大型竞争对手进入该领域之前,Runway公司已开发出35种魔法工具,针对从事视频创作的各个方面的专业人士,包括动画、视觉效果和后期制作工作。
经过5年的努力,我们证明了视频值得投入时间,Valenzuela说。然后所有人都突然意识到这值得投入精力去建设。
今天,Runway在纽约切尔西附近的宽敞办公室运营,这里像艺术画廊,又像设计工作室。一角设有制作工作室,由十几名创意工作者组成,他们制作旨在展示Runway能力的内容。
我们有一半团队来自艺术背景,Valenzuela说,整个团队已增长到约100名员工。他表示,通过与创意人员保持密切联系,我们将保持领先于竞争对手。
在大多数人工智能公司,研究科学家和产品人员占据不同的领域。在Runway内部,他们坐在相邻的办公桌前。在一张桌子上,你会看到一名博士,他一直在为这个领域的基础研究做出贡献,与之密切合作的是一名在过去20年里一直从事电影或内容的编辑和后期制作的人。
基于技术与创意的融合,Runway启办了一个年度AI电影节,去年吸引了3,000份作品参与。2025年春季的电影节将在纽约和洛杉矶两地举办的放映会上展示10名入围者的作品。
9月,该公司宣布将投入500万美元设立百部电影基金,鼓励那些想要探索这个领域边界的人。基金获得者之一Jeremy Higgins在过去两年里一直在使用Runway的工具,制作既作为艺术品又为客户服务的短动画片。
他们一直在推出使AI对我这样的人更加可触及的工具,希金斯说,他称Runway是他认识的创意人士中的榜样模型。
狮门为Runway开创了新的前景。Valenzuela强调与一个致力于使用自己的工具来扩展电影制作调色板(并顺便节省了一些钱)的工作室密切合作的重要性。但这种战略联盟也为一种新类型的交易提供了一个标志,这种交易将Runway推向了每月95美元的服务以外。
在宣布与Lionsgate的合作之后,好像有一半的好莱坞都在试图达成同样的交易或了解更多信息,Valenzuela说。
在12月,获得奥斯卡奖的编剧和电影制作人罗杰·阿瓦里在乔·罗根体验节目上与昆汀·塔伦蒂诺一起出现,对该公司再次给予了高度认可。阿瓦里复述了Valenzuela的承诺:无论你觉得自己做不到什么,都可以问我们,因为我们可能在几天内就能做到。
Valenzuela已深深融入好莱坞,他找到了主流好莱坞导演、获奥斯卡奖的演员和好莱坞影片制作公司为Runway寻找投资。他也九游娱乐找到了剧本。Valenzuela 表示,到2025年,该公司计划制作从动画短片到长片电影的各种作品。
目标是实现一个美好的循环:每部电影不仅展示了Runway的能力,也培养了一个熟悉并依赖其技术的不断增长的电影制作人网络。每一个成功的Runway支持项目都可能将更多行业专业人士转化为忠实客户,进一步巩固了该公司在好莱坞制作生态系统中的地位。
我们现在需要做的就是继续教育人们,这是任何新技术的挑战,他说。如果这意味着一个沮丧的电影制作人,终于找到了让他实现童年梦想的媒体,那就更好了。我们的工作是展示什么是可能的。
版权声明
本文仅代表作者观点,不代表本站立场。
本文系作者授权本站发表,未经许可,不得转载。