AI在用|视频风格,一键七变,用Pika玩出新高度

智能机器能不能 2024-04-30 03:03:34

机器之能报道

编辑:山茶花

以大模型、AIGC为代表的人工智能浪潮已经在悄然改变着我们生活及工作方式,但绝大部分人依然不知道该如何使用。

因此,我们推出了「AI在用」专栏,通过直观、有趣且简洁的人工智能使用案例,来具体介绍AI使用方法,并激发大家思考。

我们也欢迎读者投稿亲自实践的创新型用例。

Pika 又又又上新了!

近日,Pika 在 X 上宣布,新推出「风格生成」功能,并向所有人开放。

在其宣传视频中,用户可以在不改变画面的情况下随意切换相框中小狗的风格,黑白风、动漫风、自然风等均可一键实现。网友评价称「Pika 的风格生成功能将彻底改变游戏规则」。

X 网友同一句 Prompt 扩展出四种不同风格的兔子。

也有网友使用 Pika 的「风格生成」功能、udio 的音乐生成功能制作了一则动画短片。

视频地址:

https://x.com/ponzponz15/status/1784041053835936052

Pika 是一款 AI 视频生成应用,与 Runway 并称为 AI 文生视频「双子星」。2023 年 11 月 29 日 Pika1.0 正式发布,历经多次更新,目前已经具备文本和图像生成视频、编辑更改视频、更改视频宽高比、延长画面 4 秒时长、生成音效、口型同步等功能。

4 月 27 日,Pika 又上线了「一键风格生成」功能。目前,Pika 已更新 7 种风格,包括动漫、Moody、3D、水彩、自然、粘土动画、黑白等。玩法也非常简单。

第一步:准备工作。登陆 Pika 官网(https://pika.art/home),点击「Try Pika」,使用谷歌邮箱或 Discord 账号登录。

第二步:变换风格并生成。在操作界面下方的输入框中输入 Prompt,然后点击「Style」,任意选择一种风格,Prompt 也将随之改变。如果想生成「有声」短片,用户则可以打开「Sound effects」按钮。

例如,笔者输入「A kitten on the grass」(草地上一只小猫),并选择「Claymation」(粘土动画)风格,随即 Prompt 自动添加了「Claymation, stop motion」。最后点击生成按钮,静待一分钟,即可生成一段 3 秒视频。

最终生成的效果如下:

视频地址:https://mp.weixin.qq.com/s/Np2V3umOKYYhBCbe3GByXA

如果用户还想尝试不同的风格,只需在生成的视频下方点击「Edit」,然后选择「Style」,从中挑选任一风格即可。

例如笔者想把生成的小猫视频变换成 3D 风格,最终生成的效果如下:

除了快速迭代产品,Pika 也很会「搞事情」。两周前,Pika 联合知名 AI 语音克隆公司 ElevenLabs 发起了一场名为「FilmFAST 」AI 电影比赛,参赛者需要在 72 小时内使用 ElevenLabs 和 Pika 制作一部小短片,总冠军将获得 2000 美元大奖。

经过 10 天的评选,Pika 首届「AI 奥斯卡」大赛落下帷幕。看完获奖作品,我们想起马斯克说过的一句话,「AI movies next year」。

视频地址:https://mp.weixin.qq.com/s/Np2V3umOKYYhBCbe3GByXA

1.总冠军:《Love Bytes》

视频地址:https://mp.weixin.qq.com/s/Np2V3umOKYYhBCbe3GByXA

这部短片由 @LeMoonSynth 和 @Ethereal_Gwirl 制作,画面充满赛博朋克感,总让人想起老式玩具。

该短片讲述了一个名叫 Mee 的机器人女孩,由于缺少一颗心,对自己的存在感到不满,由此展开了一段寻找「心」的旅程。这个故事强调了自我接纳以及理解自己本心的重要性。

2. 最佳声音设计奖:《Celestial》

视频地址:https://mp.weixin.qq.com/s/Np2V3umOKYYhBCbe3GByXA

这部充满浓浓日本动漫风的作品由 @IshanNahata 制作。

作者表示,所有镜头、声音和画外音均由人工智能生成。配乐由叶夫亨・奥诺琴科(Yevhen Onoychenko)创作。

短片中的声音设计确实惊艳:森林里的鸟叫声、原子弹爆炸的声音、火箭升空的声音,再加上低沉的女声旁白以及配乐,让人身临其境。

3. 最佳实验奖 :《Keep the change》

视频地址:https://mp.weixin.qq.com/s/Np2V3umOKYYhBCbe3GByXA

据短片作者 @next_on_now 介绍,这部短片使用了三种工具,Pika 处理图像生成视频动画以及唇形同步,ElevenLabs 制作音效以及配音,Suno 则被用来制作配乐。

4. 最佳视觉效果奖:《Control Freaks》

视频地址:https://mp.weixin.qq.com/s/Np2V3umOKYYhBCbe3GByXA

这部具有皮克斯动画风格的短片出自 @MeanOrangeCat 之手。快速流畅的剪辑、精美稳定的画面、动感的配乐赢得不少网友的好评。

5. 最佳叙事奖:《Curtain Call 》

视频地址:https://mp.weixin.qq.com/s/Np2V3umOKYYhBCbe3GByXA

这部超现实短片由 @MinistryOvTrvth 和 @machine_mythos 制作完成。

人头攒动的沙滩上,被刺伤的「尼古拉斯・凯奇」痛苦地呼救,但人们误以为他在拍电影,纷纷拍照围观,最终尼古拉斯・凯奇在绝望中死去。在短片结尾中尼古拉斯・凯奇带着血迹的签名照被拍卖,讽刺感拉满。正如作者所言,「The performance of a lifetime, or is it?」

别看这部短片只有三分钟,但故事情节完整,配乐也相得益彰,只是画面仍有瑕疵,尤其是 Pika 的口型同步功能还是会出 bug。

此外,Pika 还在 X 上放出了其他优秀的参赛作品。

《Endless Surprises》

视频地址:https://mp.weixin.qq.com/s/Np2V3umOKYYhBCbe3GByXA

这部动漫短片颇有《大鱼海棠》的感觉,相比于前两部作品,它的画面稳定性更好。

作者 @panaviscope 详细介绍了该短片的制作过程,「我用 ComfyUI 生成图像,并使用 Pika 对它们进行动画制作。短片中的所有元素都是逐一动画化的,然后在 Blender 中重新编辑。

短片制作过程中,有时使用绿色背景进行动画制作效果好,但其他时候上下文背景可以提高 Pika 模型的性能。例如,为了让鱼能正常游动,我使用了一个非常模糊和黑暗的街道背景,这很容易用 ComfyUI 的 “移除背景” 功能去除。

至于如何调整运动强度,我发现有时低设置就能达到所需的场景运动效果,但其他时候,高值更好。我会捕捉我需要的几帧,然后减慢它们的速度,使用插值来确保流畅的结果。

对于声音,我采用了配音工作室的方法:生成三四遍对话,将它们导入 Ableton(我还在其中作曲),并整合了效果最好部分。Joanne 和 Keltham 是我的配音演员,我使用了较低的 “相似度” 值,以赋予模型一些创造性自由。

最终用 Adobe 的 After Effects 功能进行润色,用 topazlabs 提高分辨率。」

《The FLUFFATROO》

视频地址:https://mp.weixin.qq.com/s/Np2V3umOKYYhBCbe3GByXA

不得不说,这毛茸茸的小团子差点把人萌化了,难怪有网友称:这像是迪士尼制作的。不过,作者 @TheReelRobot 委屈地表示,评委丹尼・博伊尔称这是「非常棒的 PPT」。

以后我们会通过新专栏带来更多 AIGC 案例演示,也欢迎大家留言评论并给出改进建议。

0 阅读:0

智能机器能不能

简介:感谢大家的关注