Auto Byte

专注未来出行及智能汽车科技

微信扫一扫获取更多资讯

Science AI

关注人工智能与其他前沿技术、基础学科的交叉研究与融合发展

微信扫一扫获取更多资讯

「Sora平替」来了!一键生成5秒视频,还免费,我们实测:很顶!

机器之能报道
编辑:山茶花
人家主打一个免费,还要啥自行车。

自 Sora 发布以来,AI 圈掀起一场轰轰烈烈的文生视频革命。

例如,Lightricks 推出生成式 AI 视频讲故事平台 LTX Studio,Genmo 融资 3000 万美元躬身入局,还有上周谷歌兴奋发布的 Veo…… 无一例外,都打着「对标 Sora」的旗号。

最近,AI 文生视频领域又迎踢馆者 ——Viva,号称「让每一刻都栩栩如生」。

该应用不仅可以文生视频、图生视频,还支持 4K 分辨率放大功能。其中文生视频可生成 5 秒视频,图生视频则为 4 秒。

更感人的是,它还免费!

为了彰显自己能与 Sora「掰手腕」的实力,Viva 官网直接挂出了「同款」视频 demo。(左为 Viva,右为 Sora,点击gif可放大)

Prompt 1:photorealistic closeup video of two pirate ships battling each other as they sail inside a cup of coffee.

中文提示词 1:两艘海盗船在一杯咖啡中航行时相互争斗的逼真特写视频。

图片

图片

Prompt 2:An adorable happy otter confidently stands on a surfboard wearing a yellow lifejacket, riding along turquoise tropical waters near lush tropical islands, 3D digital render art style.

中文提示词 2: 一只可爱快乐的水獭穿着黄色救生衣自信地站在冲浪板上,沿着绿松石般的热带水域骑行,附近是郁郁葱葱的热带岛屿,3D 数字渲染艺术风格。

图片

图片

Prompt 3:A litter of golden retriever puppies playing in the snow. Their heads pop out of the snow, covered in.

中文提示词 3: 一窝金毛猎犬小狗在雪地里玩耍。他们的头从雪中探出头来,身上覆盖着。

图片

图片

Prompt 4:A corgi vlogging itself in tropical Maui.

中文提示词 4: 一只柯基在热带毛伊岛拍摄视频。

图片

图片

Prompt 5:A petri dish with a bamboo forest growing within it that has tiny red pandas running around.

中文提示词 5: 一个培养皿,里面生长着竹林,小熊猫在里面跑来跑去。

图片

图片

Prompt 6:A young man at his 20s is sitting on a piece of cloud in the sky, reading a book.

中文提示词 6: 一个 20 多岁的年轻人坐在天空的一片云上读书。

图片

图片

Prompt 7:An extreme close-up of an gray-haired man with a beard in his 60s, he is deep in thought pondering the history of the universe as he sits at a cafe in Paris, his eyes focus on people offscreen as they walk as he sits mostly motionless, he is dressed in a wool coat suit coat with a button-down shirt , he wears a brown beret and glasses and has a very professorial appearance, and the end he offers a subtle closed-mouth smile as if he found the answer to the mystery of life, the lighting is very cinematic with the golden light and the Parisian streets and city in the background, depth of field, cinematic 35mm film.

中文提示词 7: 这是一个 60 多岁、头发灰白、留着胡子的男人的特写镜头,他坐在巴黎的一家咖啡馆里,沉思着宇宙的历史,他的眼睛盯着屏幕外行走的人,而他几乎一动不动地坐着,他穿着一件羊毛外套,西装外套和一件钮扣衬衫,戴着棕色贝雷帽和眼镜,一副非常专业的样子,最后他露出了一个微妙的闭着嘴的微笑,仿佛他找到了生命之谜的答案。灯光非常电影化,金色的灯光和巴黎的街道和城市作为背景,景深,电影化的 35mm 胶片。

图片

图片

期待值拉满~

保姆级教程

我们也体验了一把。

首先进行准备工作。打开 viva 官网,使用谷歌邮箱或 Discord 账号注册登录。

Viva 官网链接:https://vivago.ai/video

图片

文生视频

进入操作页面后,选择「Text to video」,在下方输入框中输入 Prompt。

Viva 还可以进行 Negative prompt 设置,例如「ugly, dreadful, terror, too bad」等词都可拽上;

还能选择长宽比,16:9、1:1、9:16 都支持;

也可选择运动强度(0-30),数值越高意味着运动幅度越大,画面也越容易崩。参数调至 10-15 效果更佳。

图片

例如我们输入「A kitten plays with a butterfly」(猫咪戏蝴蝶),否定提示词为「ugly,too bad」,长宽比「16:9」,运动强度「10」。

最终生成的视频效果如下:

视频链接:https://mp.weixin.qq.com/s/6G4HUHdaVUhwDaq7J1w4Kw

画面中的小猫确实很真实,不过蝴蝶呢?

当然,点击「Magic Prompt」,Viva 还可以自动生成 Prompt。

例如:Serene white sands beach with crystal clear waters, lush green palm trees, Beach is secluded, with no crowds or buildings, Small shells scattered across sand, Two seagulls flying overhead. Water is calm and inviting, with small waves lapping at shore, Palm trees provide shade, Soft, fluffy clouds in the sky, soft and dreamy, with hues of pale blue, aqua, and white for water and sky, and shades of green and brown for palm trees and sand, Digital illustration, Realistic with a touch of fantasy, Highly detailed and sharp focus, warm and golden lighting, with sun setting on horizon, casting soft glow over the entire scene, by James Jean and Alphonse Mucha, Artstation.

图片

视频效果如下:

视频链接:https://mp.weixin.qq.com/s/6G4HUHdaVUhwDaq7J1w4Kw

我们玩了一圈,发现 Viva 免费是真免费,但慢也是真慢。

慢到什么程度?一段 5 秒的视频硬生生花了 15 分钟。(也可能是网速的锅)

此外,它还有一个 bug,一旦运动强度拉满,画面极容易崩,跳帧、虚化、脸部畸形…… 

总之,其他文生视频应用有的毛病,它都有。

视频链接:https://mp.weixin.qq.com/s/6G4HUHdaVUhwDaq7J1w4Kw

图生视频

Viva 也支持图生视频。选择「Image to Video」,点击「+」,上传一张图片,然后设置否定提示词、相机控制以及运动强度。

图片

其中相机控制是设置画面的移动方向和程度,我们可以根据需要进行参数设置。

图片

我们上传了一张蝶恋花的图片,并输入 prompt「The butterflies are dancing on the flowers」。

最终生成的效果如下:

视频链接:https://mp.weixin.qq.com/s/6G4HUHdaVUhwDaq7J1w4Kw

图生视频效果一般,除了整体往右上角漂移外,画面主角蝴蝶只是微弱地扇了一下翅膀,微弱到忽略不计。

两大免费「 Sora 平替」产品大 PK

实际上,3 月份时我们还推荐过另一款免费的 Sora 平替产品 ——Genmo(查看详情请移步:Sora 竞争对手融资数千万美元,目前可免费 “薅”

接下来我们就让这两款产品 PK 一下。

Prompt 1:A bird was looking for worms in the tree

中文提示词 1: 一只小鸟在树上找虫子

Viva 生成的视频效果:

Genmo 生成的视频效果:

视频链接:https://mp.weixin.qq.com/s/6G4HUHdaVUhwDaq7J1w4Kw

Prompt 2:A turtle is crawling on the beach

中文提示词 2: 一只乌龟在沙滩上爬

Viva 生成的视频效果:

Genmo 生成的视频效果:

Prompt 3:A little girl was sitting under a tree reading

中文提示词 3: 一个小女孩坐在树下读书

Viva 生成的视频效果:

Genmo 生成的视频效果:

视频链接:https://mp.weixin.qq.com/s/6G4HUHdaVUhwDaq7J1w4Kw

虽然 Viva 有时翻车翻得猝不及防,不过相比于 Genmo 的动态 PPT 来说,Viva 的效果是真顶!更何况,人家主打一个免费,还要啥自行车。

此外,Viva 还有其他热门功能,例如文生图、智能抠图、扩图、AI 修复、AI 消除等。

欲知后事如何,且看下回分解。

产业
暂无评论
暂无评论~