打造中国最大的
AI交流社区平台

只要写几段文字,就能自动生成视频|生成式AI卷出新高度

上周,Stability.ai推出了以图生图,这周RunwayML再把生成式AI卷上新高度,推出了以文本生成视频的新生成式AI——Gen-2模型。根据RunwayML联合创始人的介绍,使用这个模型,用户只要敲下文字,就能创建出与文本描述相匹配的3秒视频片段。RunwayML在官网发布了这款产品的介绍:,时长01:14

我们从RunwayML官方给出的几个例子来体会一下:


输入一段文字:The late afternoon sun peeking through the window of a New York City loft.AI就生成了下面这个视频:,时长00:04

出于安全和商业原因,RunwayML目前还不向公众开放Gen-2文本到视频AI模型。而且与开源的Stable Diffusion不同,这个模型也不会对所有人开放。在初期,Gen-2模型只能通过 RunwayML网站上的候补名单访问,并将托管在 Discord 上。
利用AI根据书面文本的描述来制作视频的想法并不新鲜。Meta和Google都在2022年年底发布了关于以文本生成视频人工智能模型的研究论文,但是真正拿出产品,RunwayML是第一个。
RunwayML是谁?
比起由RunwayML协助共同创建的Stable Diffusion AI 图像生成器,RunwayML在国内的知名度更低一些。这家公司于2018年在纽约成立,直到2022年底才因为它的视频编辑软件而迅速走红,成为美国最热门的初创公司之一。三位联合创始人Cristóbal Valenzuela、Alejandro Matamala-Ortiz和Anastasis Germanidis 相识于纽约大学艺术学院,在那里他们因对使用数字工具进行设计的共同兴趣而结下了不解之缘。后来,三人合作进行机器学习研究,很快这项研究演变成了 RunwayML公司。

只要写几段文字,就能自动生成视频|生成式AI卷出新高度插图

从名字也能看出,这三位联创都是移民,Valenzuela和Matamala-Ortiz来自智利,Germanidis来自希腊。

成立后,RunwayML陆续完成了多轮融资。最近一次被公开的融资信息是2022年12月,以5亿美元的估值融资5000万美元,比2021年12月的B轮融资的2亿美元估值翻了一倍多。

RunwayML的投资方也非常有特点,包括 Felicis(谷歌第一任产品经理Aydin Senkut创立的早期风险投资基金),美国老牌早期投资基金Madrona,Amplify Partners、Compound VC(创始人是Google 在纽约总部的第二名员工)、Coatue(美国声名赫赫的对冲基金) 和Lux Capital(最早发现并公布投资纳米技术的风险投资)等等。

RunwayML为什么能吸引这些知名投资基金?
让所有人轻松创作内容

“我们正在利用计算机图形学和机器学习的最新进展来突破创造力的界限,从而降低内容创作的障碍。”

RunwayML的出发点就是降低内容创作的障碍,让任何普通人都可以使用AI工具去创作。

这要求AI工具实现绝对的简单和易用。从脑海中灵感闪现,到把它们制作成图、视频、音频,尽可能将这中间的距离缩到最短。

这个初心,与联合创始人、首席执行官Valenzuela的“艺术家”出身大有关系。

Valenzuela毕业于智利一所研究型私立大学——阿道夫·伊瓦涅斯大学 (AIU),在这里他获得了经济学和商业管理学士学位,以及设计艺术硕士学位。

在AI创业大军中,没有工程师背景的创业者并不多见。但也许正是因为非工程师背景,RunwayML的产品自带用户界面更加“自然”、友好的基因。

只要写几段文字,就能自动生成视频|生成式AI卷出新高度插图1

除了最近发布的用文本生成视频,RunwayML还有非常多种类工具,包括以文生图、以图生图、将一组图像转换为动画视频等等。

我们尝试上传了一组分别在春夏秋冬四个季节拍摄的图片,让它生成动画视频。

只要写几段文字,就能自动生成视频|生成式AI卷出新高度插图2

上传、生成、调整,整个过程都非常丝滑,容易上手。

几秒钟后,我们得到了下面这个动画。上手真的非常简单。,时长00:11
对创作工具类企业的启示

“我们不寻求勉强改进流程。我们相信,预测未来的最佳方式是发明未来。我们边做边学,并长期优化。”RunwayML现在已经推出了30多款AI工具,自2022年以来,RunwayML产品新功能和新工具的更新、发布速度越来越快,若有神助。

但RunwayML创始人却说,“为了这场‘马拉松’,我们已经训练了四年。”

潜台词是,没有神秘力量加持,只是出发的早,并且在坚持“跑”

在商业模式上,RunwayML目前推出3种用户方案——免费,标准版(15美金/月)和Pro版(35美金/月)。后两种付费用户如果按季度购买会比按月购买有20%的折扣。

国内有没有RunwayML同类型的公司呢?

和RunwayML工具箱里单个工具撞款的公司有很多,比如图片和视频内容制作工具canva可画、创客贴,文本工具Effie、Bear等等。

但是和RunwayML一样,整合几十种工具于一体的,还没有。

和RunwayML一样,让用户能够用更“自然”的语言去自生成内容的创作工具,也没有。

留给上面提到的这些公司的时间不多了。

赞(0) 打赏 直达链接
未经允许不得转载:AI爱好者 » 只要写几段文字,就能自动生成视频|生成式AI卷出新高度

评论 抢沙发

欢迎来到AI爱好者

我们旨在打造一个最具实力的中文AI交流社区平台,致力于为所有AI爱好者,创业者和使用者提供优质服务. 我们的宗旨是为广大用户提供免费解决方案,您可以通过问答形式提出与AI相关的任何问题.

AI社区AI工具

安全服务战略合作伙伴:麒麟盾 SCDN

觉得文章有用就打赏一下文章作者

非常感谢你的打赏,我们将继续提供更多优质内容,让我们一起创建更加美好的网络世界!

微信扫一扫打赏

登录

找回密码

注册