Auto Byte

专注未来出行及智能汽车科技

微信扫一扫获取更多资讯

Science AI

关注人工智能与其他前沿技术、基础学科的交叉研究与融合发展

微信扫一扫获取更多资讯

机器之心
机器之心原创

厉害了！Adobe新出Firefly视频模型，2分钟速成高清大片

在 Sora 加入 Adobe 全家桶数月后，Adobe 终于推出了自己的视频生成模型。

随着大家对新鲜、短视频内容的需求不断增长，编辑、电影制作人和内容创作者被要求在更短的时间内创作出更好的作品。如今，编辑不仅要剪辑图片，还要进行色彩校正、动画渲染、音频混合等，这些内容大大增加了工作时间。

刚刚，Adobe 宣布推出 Firefly 视频模型。Adobe 旨在利用 AI 强大的功能帮助视频内容创作者扩展他们的创意，在客户要求的时间内提供高质量的成果。

在官方博客中，Adobe 进行了一系列 Demo 展示，从提示到成片生成时间不到 2 分钟。举例来说：

提示：日落时分，雪林中驯鹿的特写镜头和细节肖像。灯光如电影般绚烂、柔和，如阳光般明媚，金色背光，梦幻般的散景和镜头光晕。色彩等级如电影般神奇。提示：慢动作拍摄炽热的火山景观，熔岩从火山口喷涌而出。摄像机飞过熔岩，熔岩溅到镜头上。灯光具有电影感。色彩等级也具有电影感、戏剧性和高对比度。 提示：用羊毛和毛毡制成的微型可爱怪物正在跳舞，3D 渲染，柔和的灯光，梦幻般的散景，电影感。 提示：无人机上的摄像机飞过沙漠的镜头，风吹过沙丘，下面的沙子形成波浪。 

图片

如果你需要更多补充画面， 以填补时间线上的空白 ，Firefly 视频模型也能帮你完成。举例来说

原始素材为：

图片

下面是根据提示生成的新片段，提示语为：透过大红色放大镜观察白色蒲公英，特写。

图片

Firefly Video 模型还能将视频序列进行组合：

图片

Firefly Video 模型还能进行相机控制，如角度、运动和缩放，从而创建完美的拍摄视角。
图片
提示：无人机在日落黄金时段拍摄雪林树木之间的场景。灯光如电影般绚烂、柔和、阳光般明媚，金色背光、梦幻般的散景和镜头光晕。色彩等级如电影般神奇。
Firefly 视频模型还适用于动画制作、特效合成。例如，给一段街舞视频添加火焰特效：

图片

图片

图片

在制作动画方面，例如给定提示：手绘简单的线条艺术，一个小孩子仰望太空，脸上带着奇妙的表情。

图片

再比如，给定提示：月亮上可爱的奶酪球在微笑，3D 渲染，octane，柔和的灯光，梦幻般的散景，背景中浮光闪闪：

图片

有时给定提示要求生成包含易读文本的高质量视频，这需要 Firefly 视频模型具备较高的「文本渲染」能力。例如，水溅和结冰的宏观细节镜头，拼写出「ICE」一词：

图片

今年晚些时候，Generative Extend 将在 Premiere Pro（测试版）中推出，将让用户可以扩展剪辑以覆盖素材中的间隙、平滑过渡或延长镜头时间，来实现完美的定时编辑。

例如，剪辑师可以在 Premiere Pro 中使用由 Adobe Firefly 视频模型提供支持的 Generative Extend 来延长镜头的保留时间，以匹配音频的渐强。
Adobe 于 2023 年 3 月首次推出 Adobe Firefly。作为营销 SaaS 巨头，Adobe 推出的 Firefly 系列模型为用户打消了内容版权、隐私安全方面的疑虑。

Adobe 表示：Firefly 视频模型的设计具有商业安全性，并且仅针对 Adobe 有权使用的内容进行训练，而绝不会针对 Adobe 用户的内容进行训练。

参考链接：https://blog.adobe.com/en/publish/2024/09/11/bringing-gen-ai-to-video-adobe-firefly-video-model-coming-soon
产业视频生成FireflyAdobe
相关数据
无人机技术

无人机（Uncrewed vehicle、Unmanned vehicle、Drone）或称无人载具是一种无搭载人员的载具。通常使用遥控、导引或自动驾驶来控制。可在科学研究、军事、休闲娱乐用途上使用。

来源：维基百科
视频生成技术

视频生成是指利用深度学习等技术生成视频的任务。

推荐文章
登录后评论
暂无评论
暂无评论~
返回顶部