目前很多公司都陆续推出了文生视频的产品,比如 vidu和混元,都号称能对标sora,能突破4s上限,能认知物理世界,这把大家胃口都吊起来,口号有了,却仍然需要排队等待,申请内测,咱也确确实实用不上啊,就像Kimi的200万上下文一样,排队排到忘记。
国外又一个AI视频产品VIVA横空出世,能否媲美sora暂且不说,但从目前水平来看,功能和体验,生成质量确实高于现在所有的AI视频生成工具,本文评测VIVA的魔法能力。
终于有普通人可以立刻使用的类 Sora 视频生成工具了!海外产品 viva 发布了首个开放给全部用户使用的 Sora 同架构视频生成模型,而且现阶段免费。支持文本生成视频、图片生成视频以及 4K 分辨率放大功能,另外也支持提示词的自动优化。
文生视频单次可以生成一条 5 秒的视频,图生视频是 4 秒视频
以下全文都是通过热乎的提示词去体验产品特性,忽略本文普通一般的提示词(浪漫感人🤣),这导致生成的视频和图片有些一般。(提示词调优是一件艺术满满的手艺),试试网上那些优秀的提示词,效果满满。
体验地址:vivago.ai
实际上,viva在合适的提示词下生成图片和视频的表现都很优秀。
521 ,AI在一起❤❤
VIVA提供了视频和图像2大类的能力:
视频
- 文生视频
- 图生视频
- 视频4K高清
- 提示词魔法优化
图像
- 文生图像
- 图像成文
- 区域重绘
- 自动扩图
- 区域抠图
文生视频
先看看 别人生成的视频
photorealistic closeup video of two pirate ships battling each other as they sail inside a cup of coffee.
两段海盗船在一杯咖啡中航行并相互战斗的逼真特写视频。
niagara falls with colorful paint instead of water.
尼亚加拉大瀑布,水被换成了彩色的颜料。
A white and orange tabby cat is seen happily darting through a dense garden, as if chasing something. Its eyes are wide and happy as it jogs forward, scanning the branches, flowers, and leaves as it walks. The path is narrow as it makes its way between all the plants. the scene is captured from a ground-level angle, following the cat closely, giving a low and intimate perspective. The image is cinematic with warm tones and a grainy texture. The scattered daylight between the leaves and plants above creates a warm contrast, accentuating the cat’s orange fur. The shot is clear and sharp, with a shallow depth of field.
一只白色和橙色相间的虎斑猫正快乐地在茂密的花园中疾驰,仿佛在追逐什么东西。它向前慢跑时眼睛睁得大大的,很开心,边走边扫视着树枝、花朵和树叶。它在所有植物之间穿行的路径很狭窄。这个场景是从地面水平的角度拍摄的,紧紧跟着猫,给人一种低而亲密的视角。画面具有电影般的效果,色调温暖,带有颗粒感的纹理。树叶和植物上方散落的日光营造出温暖的对比,突出了猫橙色的皮毛。镜头清晰锐利,景深较浅。
中文提示词-效果不佳
先找豆包生成了一个520的浪漫视频脚本
海边、夕阳、海浪、沙滩、男生、玫瑰花、女生、惊喜、拥抱、深情凝望、十指紧扣、漫步、爱的足迹、捋顺发丝、相依而坐、夕阳西沉、孔明灯、繁星、拥吻、520、爱意、永恒
开始生成视频,耐心等待视频生成任务执行完成,此时可以去体验图片功能
当我看到视频时,我要笑死,这是什么玩意???和爱情无关啊!!!
英文提示词
不满意,重新试试英文:
Seaside, sunset, waves, beach, boy, a big bouquet of roses, girl, running, hugging, looking into each other's eyes affectionately, holding hands and strolling, footprints, brushing aside hair, kissing, Kongming lanterns.
海边、夕阳、海浪、沙滩、男生、一大束玫瑰花、女生、奔跑、拥抱、深情对视、牵手漫步、脚印、拨开头发、亲吻、孔明灯。
生成视频如下:
提示词魔法优化
此处我选择使用官方的提示词优化,得到了以下的提示词:
Affectionate teenagers by a serene beach at sunset, a boy holding a grand bouquet of roses, a girl running with untamed hair, both strolling along and sharing a deep, loving gaze, footprints in the sand, hand-in-hand, embracing with a tender kiss, vibrant Kongming lanterns illuminating the sky, seamless blend of warm lighting, high-resolution, intricate details, color palette of reds, pinks, and soft purples, romantic and whimsical style, by Zhu Xuan and Katsushika Hokusai, Artstation.
日落时分宁静海滩边情意绵绵的青少年,一个男孩手捧一大束华丽的玫瑰花,一个女孩头发飞扬地奔跑着,两人一起漫步并分享着深深的、充满爱意的目光,沙滩上的脚印,手牵手,带着温柔的吻相拥,充满活力的孔明灯照亮天空,温暖灯光的无缝融合,高分辨率,复杂精细的细节,红色、粉色和柔和紫色的调色板,浪漫而奇幻的风格,朱宣和葛饰北斋,艺术站。
耐心等待,对比一下,优化之后的提示词可以有哪些新的效果:
Sora的官方提示词 viva效果
这是一部电影预告片,讲述了30岁的太空人戴着红色羊毛针织摩托车头盔的冒险经历,蓝天,盐沙漠,电影风格,用35毫米胶片拍摄,色彩鲜艳。
A movie trailer featuring the adventures of the 30 year old space man wearing a red wool knitted motorcycle helmet, blue sky, salt desert, cinematic style, shot on 35mm film, vivid colors.
Drone view of waves crashing against the rugged cliffs along Big Sur’s garay point beach. The crashing blue waters create white-tipped waves, while the golden light of the setting sun illuminates the rocky shore. A small island with a lighthouse sits in the distance, and green shrubbery covers the cliff’s edge. The steep drop from the road down to the beach is a dramatic feat, with the cliff’s edges jutting out over the sea. This is a view that captures the raw beauty of the coast and the rugged landscape of the Pacific Coast Highway.
无人机拍摄的海浪冲击着大苏尔加雷角海滩上崎岖的悬崖。蓝色的海水拍打着白色的波浪,夕阳的金色光芒照亮了岩石海岸。远处有一座小岛,岛上有一座灯塔,悬崖边上长满了绿色的灌木丛。从公路到海滩的陡峭落差是一个戏剧性的壮举,悬崖的边缘突出在海面上。这是一幅捕捉到海岸原始美景和太平洋海岸公路崎岖景观的景色。
文生图像
先看看别人生成的图片效果:
中文提示词-效果不佳
给出一段提示词:
海边、夕阳、海浪、沙滩、男生、一大束玫瑰花、女生、奔跑、拥抱、深情对视、牵手漫步、脚印、拨开头发、亲吻、孔明灯。
可以看到输入框内置了大量的效果提示词。
生成了12张图片,并且可以对图片进行区域重绘操操作
英文提示词
选择重新加入提示词,重新绘制: 这次我们使用英文提示词:
Seaside, sunset, waves, beach, boy, a big bouquet of roses, girl, running, hugging, looking into each other's eyes affectionately, holding hands and strolling, footprints, brushing aside hair, kissing, Kongming lanterns.
海边、夕阳、海浪、沙滩、男孩、一大束玫瑰花、女孩、奔跑、拥抱、深情对望、牵手漫步、脚印、拨开头发、亲吻、孔明灯。
区域重绘
我选择了其中三个图片输入以下的提示词,进行重绘制;
Moonlit night, gentle breeze, garden, flowers, couple, bench, pergola, vines, hand holding, starry sky, soft music, kiss.
月夜、微风、花园、花朵、情侣、长椅、棚架、藤蔓、牵手、星空、轻音乐、亲吻。
生成如下图片,确实对局部进行了新的图片合成,效果需要不断调优。但是也是AI赋能创意,希望有一天可以在局部产生完美的效果,提升整个图片的效果。
那我们来试试英文提示词版的图片区域重绘,我们把夕阳漫天的孔明灯换成浪漫的星空试试。
a vast starry sky with countless twinkling stars, the starry sky filled with brilliant and glittering stars, a magnificent starry sky where stars shine brightly and beautifully, a captivating starry sky with a myriad of shimmering stars.
一片有着无数闪烁星星的广阔星空,充满了灿烂闪耀星星的星空,一片宏伟壮丽的星空,其中星星明亮而美丽地闪耀着,一片迷人的有着无数闪烁星星的星空。
星空遍布爱心-效果很好
Sky filled with heart-shaped balloons, Heart-shaped balloons in the sky, Many heart-shaped balloons floating in the sky.
再尝试一次,这次效果很好,所有的孔明灯替换成了爱心。图片的一致性也得到了保证。
扩大一下范围试试,让天空变暗。加入 Dark night, bonfire.黑夜 篝火
Vast starry sky with countless twinkling stars, Brilliant and glittering star-filled starry sky, Magnificent starry sky with stars shining brightly and beautifully, Captivating starry sky with a myriad of shimmering stars, Beach, Dark night, Bonfire.Seaside, sunset, waves, beach, boy, a big bouquet of roses, girl, running, hugging, looking into each other's eyes affectionately, holding hands and strolling, footprints, brushing aside hair, kissing, Kongming lanterns.
有着无数闪烁星星的广阔星空,充满灿烂闪耀星星的星空,有着星星明亮而美丽闪耀的宏伟壮丽星空,有着无数闪烁星星的迷人星空,沙滩,黑夜,篝火。海边、夕阳、海浪、沙滩、男孩、一大束玫瑰花、女孩、奔跑、拥抱、深情对望、牵手漫步、脚印、拨开头发、亲吻、孔明灯。
提示词的场景词太多了导致效果略科幻了,提示词的改变确实对整个图片带来很大的变化,提示词高手可以不断调优提示词 来达到自己的效果。
再试试这段提示词直接生成图片,是否会比上面的科幻图效果好。
Vast starry sky with countless twinkling stars, Brilliant and glittering star-filled starry sky, Magnificent starry sky with stars shining brightly and beautifully, Captivating starry sky with a myriad of shimmering stars, Beach, Dark night, Bonfire.Seaside, waves, beach, boy, a big bouquet of roses, girl, running, hugging, looking into each other's eyes affectionately, holding hands and strolling, footprints, brushing aside hair, kissing, Kongming lanterns.
结论:效果很好,直接生成的图片体现了星空下一对情侣在海面,星星在海里闪烁,爱意在指尖流淌。
图生视频
我们使用上文生成的图片继续体验,支持自定义视频的宽高比: 16:9,1:1,9:16 三种比例。
生成视频如下:
支持运镜和运动强度设置
支持运镜和运动强度设置,viva支持6种运镜,推拉,上下,左右。
修改运动强度和运镜,效果如下:
运动强度设置的比较高,运镜也有了变化:
4K视频高清
4K增强,相当实用的功能,其他产品都要付费,VIVA直接免费提供了。生成的时间比较长,耐心等待
4K视频压缩到了3s,大小从原来的1MB变成了13.8MB
总结
viva的优势:
- 视频和图像的能力很全面,提示词用的好,产出图片和视频质量很高,最最重要的是完全免费,没有花哨的免费额度之类的套路
- 功能多样,且持续更新,有部分功能文中没有去体验,比如新出来的图生文字等,大家可以自行体验。体验地址:vivago.ai
缺点:
- 对中文支持不是很好,需要使用英文提示词,多探索官方的提示词。
- 功能效果没有示例,需要用户探索丰富的功能效果。
虽然不能超出5秒的限制,测试下来,应该是目前运动幅度最大的视频生成模型,同时图像分辨率也是现在可以用的视频生成产品中最大的。文生视频的效果比图生视频要更好,同时如果要是用的话建议把运动幅度调到 20 左右比较合适。
viva 优势领域就是可以生成比较好的竖屏视频,目前很多视频模型的演示都是横屏视频,竖屏的表现并不好,但是短视频又是视频内容的大头,所以竖屏视频的生成质量是个很重要的指标。
免费产品里最能打的,付费产品里又能一战的,非VIVA莫属。
最后温馨提示,免费总是会有红利期的,比如pixverse,runway,pika原来都是免费的,现在都逐渐开始收费了,所以抓紧上车,先玩先享受。