AI视频年大爆发!Gen-2/Pika成时代爆款,2023年AI视频生成领域的现...
新智元
共 3012字,需浏览 7分钟
· 2024-04-10
新智元报道
编辑:桃子【新智元导读】2023年,也是AI视频元年。过去一年究竟有哪些爆款应用诞生,未来视频生成领域面临的难题还有哪些?
过去一年,AI视频领域我们见证了,Gen-2、Pika等爆款产品的诞生。 来自a16z的Justine Moore,详细盘点了人工智能视频生成领域的现状、不同模型比较,以及还未解决的技术挑战。 接下来,一起看看这篇文章都讲了什么?
AI视频生成大爆发
今天,你可以在哪里生成AI视频?
21个视频生成产品
今年到目前为止,a16z已经跟踪了21种公开产品。 虽然你可能听说过Runway、Pika、Genmo和Stable Video Diffusion,但还有许多其他的东西需要探索。 这些产品大多来自初创公司,其中许多都是从Discord bots,有以下几个优势: - 不需要构建自己面向消费者的界面,只需专注于模型质量 - 可以利用Discord每月1.5亿活跃用户的基础进行分发 - 公共渠道为新用户提供了一种简便的方式,让他们获得创作灵感(通过查看他人的创作) 然而,随着技术成熟,我们开始看到越来越多的AI视频产品建立自己的网站,甚至是App。 随着Discord提供了一个很好的平台,但在纯生成之上添加的工作流而言,却是有限的,并且团队对消费者体验的控制很少。 值得注意的是,还有很大一部分人不使用Discord,因其觉得界面混乱让人困惑。
研究和技术
谷歌、Meta和其他公司在哪里? 在公开的产品列表中,他们显然没有出现--尽管你可能已经看到了他们发布的关于Emu Video、VideoPoet 和 Lumiere等模型的帖子。 到目前为止,大型科技公司基本上都不选择公开自家的AI视频产品。 取而代之的是,他们发表了各种相关的视频生成的论文,而没有选择视频演示。 比如,谷歌文本生成视频的模型Lumiere 这些公司有着巨大的分销优势,其产品拥有数十亿用户。 那么,他们为什么不放弃发布视频模型,而在这一新兴类别市场中夺取巨大份额。 最主要的原因还是,法律、安全和版权方面的担忧,往往使这些大公司很难将研究转化为产品,并推迟推出。如此一来,让新来者有机会获得先发优势。
AI视频的下一步是什么?
尚未解决的问题
Genmo
Runway
Stable Video Diffusion
Pika Labs 谁将主导视频制作的工作流程? 而在许多产品之间,来回是没有意义的。 除了纯粹的视频生成,制作好的剪辑或电影通常需要编辑,特别是在当前的范例中,许多创作者正在使用视频模型来制作在另一个平台上创建的照片的动画。 从Midjourney的图像开始,在Runway或Pika上制作动画,然后在Topz上进行升级的视频并不少见。 然后,创作者将视频带到CapCut或Kapwing等编辑平台,并添加配乐和画外音,通常是在Suno和ElevenLabs等其他产品上生成的。 参考资料: https://a16z.com/why-2023-was-ai-videos-breakout-year-and-what-to-expect-in-2024/
评论
AI生成视频(上)- AI生成图片
2024.03.23 晚上9点,我邀请AI产品专家免费给大家分享:AI生成视频(上)- AI生成图片(Stable Diffusion 模型 生成 图片 原理介绍),为了不错过直播,可长按识别下方二维码预约。
产品刘
0
以假见真,5 款 AI 视频生成工具丨AI 情报局
“你知道这是假的,所以需要思考什么是真的。” 欢迎来到“AI情报局”,我们提供最热的AI产品推荐、人工智能最新动态和创新案例。帮助AI开发者、创业者、产品等专业人士保持信息的前沿性,促进知识的共享与交流。添加vx:aite
雷锋网
0
【AI】1996- 2024 年必备的 9 款 AI PPT 生成工具
关注 “AI 工具派” 探索最新 AI 工具,发现 AI 带来的无限可能性! 近期推荐 PPT:Tome|美图PPT|AiPPT|Gamma 图片处理: Pikaso | 图片修复 | DeOldify | BgSub | Dreamina 学习工具: 据意查句 | Grammarly...
前端自习课
0