文章主题:稳定AI, 文本生成动画工具包, Stable Animation SDK, 文本

666AI工具大全,助力做AI时代先行者!

西风 发自 凹非寺

量子位 | 公众号 QbitAI

Stable Diffusion也能生成视频了!

Stability AI最近发布了一款全新的文本生成动画工具包——Stable Animation SDK,它能够支持多种输入方式,包括文本、初始图像以及视频等。

1701777641421.jpg

用户可以利用Stable Diffusion 2.0以及Stable Diffusion XL等多元化的Stable Diffusion模型,来实现动画的生成。

Stable Animation SDK的强大功能一经展现,网友惊呼:

哇哦,等不及想试试了!

1701777649606.jpg

目前,有关Stability AI正在对新工具进行技术优化的说法尚不明确,但预计不久之后将公开驱动动画API的组件源代码。

3D漫画摄影风,不限时长自动生成

Stable Animation SDK可支持三种创建动画的方式:

1、文本转动画:用户输入文prompt并调整各种参数以生成动画(与Stable Diffusion相似)。

2、文本输入+初始图像输入:用户提供一个初始图像,该图像作为动画的起点。图像与文本prompt结合,生成最终的输出动画。

3、视频输入+文本输入:用户提供一个初始视频作为动画的基础。通过调整各种参数,根据文本prompt生成最终的输出动画。

1701777665972.jpg

Stable Animation SDK在生成视频时,并未对时长做出任何限制,然而,对于较长视频的生成,所需时间将会相应延长。

1701777677314.jpg

Stability AI推出Stable Animation SDK后,众多网友纷纷分享了自己在使用该软件后的实际效果。下面让我们一起来欣赏一下这些精彩反馈:

1701777680169.jpg1701777681596.jpg1701777683439.jpg

Stable Animation SDK提供了丰富的参数设置选项,其中包括步骤(steps)、采样器(sampler)、缩放(scale)以及种子(seed)。通过这些参数的灵活配置,用户可以根据实际需求实现更加精确和高效的动画效果。

还有下面这么多的预设风格可选择:

在数字时代,我们常常会接触到各种各样的艺术形式,其中就包括3D模型、仿真胶片、动漫、电影、漫画书、数码艺术、增强幻想艺术等。这些元素不仅丰富了我们的视觉体验,也为我们带来了无限的创新灵感。首先,3D模型是一种通过计算机技术创建的三维立体图像,它们可以用于游戏设计、建筑设计、产品设计等多个领域。仿真胶片则是用来模拟真实物体纹理的一种技术,可以让虚拟世界更加真实可信。其次,动漫和电影是两种广泛受欢迎的艺术形式。它们通过夸张的手法,塑造出许多富有特色的角色形象,给观众带来了无尽的欢笑和感动。而漫画书则是一种以图像为主导的书籍,它通过细腻的描绘和幽默的文字,吸引了无数的读者。此外,数码艺术和增强幻想艺术是两种新兴的艺术形式。数码艺术利用数字技术,创造出许多令人惊叹的作品。而增强幻想艺术则是通过计算机技术,将幻想元素与现实世界相结合,为观众带来全新的视觉体验。除了上述艺术形式,还有等距投影、线稿、低多边形、造型胶土、霓虹朋克、折纸、摄影和像素艺术等多种艺术形式,它们各具特色,共同构成了丰富多彩的艺术世界。总的来说,无论是3D模型、仿真胶片,还是动漫、电影、漫画书,都为我们的生活带来了更多的色彩和乐趣。而数码艺术、增强幻想艺术等新兴形式的出现,更是为我们的艺术世界注入了新的活力。

1701777684985.jpg

目前,动画功能API的使用是以积分计费的,10美元可抵1000积分。

使用Stable Diffusion v1.5模型,在默认设置值(512×512分辨率,30steps)下,生成100帧(大约8秒)视频将消耗37.5积分

在默认设定下,每次生成的帧数都会对应一个Cadence值,该值可以依据不同的动画模式来选择,可以是较低的,也可以是较高的。需要注意的是,Cadence值并没有上限,它代表了动画中必须生成的静止图像数量,也就是至少需要有一张图片。对于从视频转为视频的情况,其Cadence值必须保持为1:1。

官方也给出了一个示例,可以看出生成100帧标准动画的标准静止图像(512×512/768×768/1024×1024,30 steps), 随着Cadence值变化,积分的使用情况:

1701777686250.jpg

简单来说,受参数、时长等各种因素的影响,生成视频的费用并不固定。

效果和价格我们都了解了,那如何安装并调用API呢?

1701777687839.jpg

要创建动画并测试SDK的功能,只需要两个步骤即可运行用户界面:

1701777690695.jpg

在开发应用程序时,需要先设置一个Python虚拟环境,并在其中安装Animation SDK:

1701777690918.jpg

具体使用说明书放在文末啦!

1701777691198.jpg

越发火热的视频生成

最近,视频生成领域变得越来越热闹了。

比如,AI视频生成新秀Gen-2内测作品流出,网友看完作品直呼:太不可思议了!

1701777691992.jpg

Gen-2的更新更是一口气带来了八大功能:

文生视频、文本+参考图像生视频、静态图片转视频、视频风格迁移、故事板(Storyboard)、Mask(比如把一只正在走路的小白狗变成斑点狗)、渲染和个性化(比如把甩头小哥秒变海龟人)。

还有一位名叫Ammaar Reshi的湾区设计师用ChatGPT和MidJourney两个生成AI模型,成功做出一部蝙蝠侠的动画小电影,效果也是非常不错。

1701777693708.jpg

自Stable Diffusion开源后,一些开发者通过Google Colab等形式分享了各种魔改后的功能,自动生成动画功能一步步被开发出来。

像国外视频特效团队Corridor,他们基于Stable Diffusion,对AI进行训练,最终能让AI把真人视频转换为动画版本……

大家在对新工具的出现兴奋不已的同时,也有网友对Stable Animation SDK生成的视频所展现出的效果发出质疑:

这与 deforum有什么区别?没有时间线都不连贯,只有非常松散的一帧接一帧的图像。

1701777695141.jpg

那么你玩过这些工具了吗?感觉效果如何?

传送门:https://platform.stability.ai/docs/features/animation/using(Stable Animation SDK使用说明书)

参考链接:[1]https://www.youtube.com/watch?v=xsoMk1EJoAY[2]https://twitter.com/_akhaliq/status/1656693639085539331[3]https://stability.ai/blog/stable-animation-sdk

「人工智能」、「智能汽车」微信社群邀你加入!

欢迎关注人工智能、智能汽车的小伙伴们加入交流群,与AI从业者交流、切磋,不错过最新行业发展&技术进展。

PS. 加好友请务必备注您的姓名-公司-职位噢 ~

1701777695410.jpg

点这里?关注我,记得标星哦~

一键三连「分享」、「点赞」和「在看」

科技前沿进展日日相见 ~ 

1701777695575.jpg

稳定AI, 文本生成动画工具包, Stable Animation SDK, 文本

aigc666aigc999_0.jpg

AI时代,拥有个人微信机器人AI助手!AI时代不落人后!

免费ChatGPT问答,办公、写作、生活好得力助手!

搜索微信号aigc666aigc999或上边扫码,即可拥有个人AI助手!

Leave a Reply

Your email address will not be published. Required fields are marked *