adtop
首页 金融 查看内容

StableDiffusion又出大招,「文生动画」震撼发布淘汰导演,D

2023-05-16 10:16| 发布者: 子墨| 查看: 55701| 评论: 0|来自: IT之家  阅读量:8750   

摘要:StabilityAI又来卷了AI视觉圈了!StableAnimation震撼发布,动画效果令人惊叹。 StabilityAI又放大招! 现在,StableDiffusion也能生成视频了。AI届,实在是太卷了。...

Stability AI 又来卷了 AI 视觉圈了!Stable Animation 震撼发布,动画效果令人惊叹。

Stability AI 又放大招!

现在,Stable Diffusion 也能生成视频了。AI 届,实在是太卷了。

昨天,Stability AI 发布了一款专为艺术家和开发人员设计的工具 ——Stable Animation SDK。用户可以通过多种方式创建令人惊叹的动画效果。

此前,Runway 的 Gen-2 就相当炸裂,宣传词非常霸气 ——「say it,see it」。

现在,Stability AI 也有比肩 Gen-2 的视频生成工具了!

Stable Diffusion 能做视频了

借助 Stability AI 的动画端点,美术师可以使用所有 Stable Difusion 模型来生成动画,包括 Stable Diffusion 2.0 和 Stable Diffusion XL。

不过,有别于之前发布的开源模型,Stable Animation 目前仅能通过 SDK 和付费 API 使用。

现在,用这三种方式,都可以创建动画了 ——

经典的 prompt

就像使用 Stable Diffusion、Midjourney 或 DALL-E 2 一样,用文本生成动画。

输入 prompt,调整各种参数,就能生成动画。

prompt + 图像

提供一个初始图像,作为动画的基础。之后,结合 prompt 和这个初始图像,就能生成最终输出的动画。

prompt + 视频

提供一个初始视频,作为动画的基础。同样,通过各种参数的调整,外加 prompt 的引导,最终得到输出的动画。

1 块钱,就能生成 100 帧动画

该软件似乎仍处于测试阶段。Stability AI 并没有通过他们的浏览器平台提供,而是仅提供软件开发套件(SDK)和付费 API。

当然,这并不妨碍第三方通过服务提供这种动画模型。

不过,目前想试用这个功能的话,门槛还比较高,因为 SDK 和 API 要通过 Python 脚本来调用。

与 Stability AI 的图像模型类似,Stable Animation 也可以设置许多参数,例如 step、sampler、scale 或 seed。此外,还提供了诸如 outpainting 或 prompt interpolation 等功能。

不同的参数也会影响价格。所以创建一个视频要花费多少钱,并不确定。

Stability 给出的报价范围是,在不同设置下,每 100 帧的价格从 3 美分到 18 美分不等。

Stability AI 以输出动画的积分值作为收费的依据,用户生成的动画会被换算成一个积分,每 1000 个积分消耗 1 美元。

小编算了一下,根据官方公布的积分计算方法,一块钱人民币大概能生成一段 100 帧的 1024*1024 分辨率的动画。

但是其他的参数也会影响价格,官方给了一个表来说明支持调整的参数,以及是否会影响到生成动画的价格。

与 Stable Diffuision XL 兼容

Stable Animation 可以与每个版本的 Stable Diffusion 结合使用。

它的默认版本是 1.5,但我们也可以选择使用新版的 Stable Diffusion XL。

里面有很多样板,包括动漫、漫画书、低多边形、像素艺术。

原始分辨率是 512 x 512 像素,可以增加到 1,024 x 1,024 像素。此外,可以使用升频器。

Stable Animation 的默认值是 72 帧,但根据说明,它可以增加到无穷大。

此前,Stability AI 就已经有了基于 Stable Diffusion 的动画工具,比如,我们可以通过 prompt interpolation生成一小段动图。

这次的升级的不同之处在于,table Animation 生成视频的能力更全面、更成熟。

虽然现在,AI 还没进化到让我们按个按钮就能生成电影,但 Stable Animation、Runway ML、Phenaki、Imagen Video 等模型的超强进化,已经预示了视觉生成 AI 的视频生成功能,会越来越惊艳。

网友实测

Stable Animation 一发布,网友们就按捺不住自己渴望尝试的小手。

比如,npaka 就分享了自己的使用体验。

首先,将 DreamStudio 的 API 密钥设置为本机的环境变量。

然后,准备 Python 虚拟环境,并安装 stability_sdk 并启动 Animation GUI。

$pipinstall'stability_sdk'$python-mstability_sdkanimate--gui

在「Render」选项卡中设置文本提示,然后按「Render」按钮。

最后,动画就做好啦。

此外,还有一些网友也分享了自己的作品。

AI 离生成电影还有多远

AI 生成视频的功能如此强大,已经有网友打算投资 AI 动画工作室了。

这位表示,脑洞已准备好,就等一个用户友好的动画工具了。

网友们的畅想并不遥远,最近,Wes Anderson 的《指环王》的新预告片中,就用到了不少 AI 工具。

OpenAI 前 AI 主管 Andrej Karpathy 猜测,这部预告片中至少用到了 Midjourney / Stable Diffusion、ControlNet、ElevenLabs、D-Id、ChatGPT、Adobe 等工具。

看来,AI 视觉工具再这么进化下去,取代好莱坞大导不会太远了。

参考资料:

郑重声明:此文内容为本网站转载企业宣传资讯,目的在于传播更多信息,与本站立场无关。仅供读者参考,并请自行核实相关内容。

分享至:
| 收藏

相关

  • 招商中证国新央企股东回报ETF今日发行!
  • 万众期待!5月15日-19日,招商中证国新央企股东回报ETF正式发售,募集规模上限为20亿元,力争在重塑中国特色估值体系背景下,为投资者提供便捷布局央企估值修复红利机遇的ETF配置选择。 据悉,招商中证国新央企股东回报...
  • 企业家在线 发布于  2023-05-15 09:47  
  • 南方六省大雨
  • 从5月4日开始,我国南方地区的江西、福建、广东、广西、湖南、贵州等多个省区出现了猛烈的强降雨,5月6日,福建邵武单日降雨量打破记录极值,超过250毫米,而江西宜黄更是超过300毫米,相当于一天就把年均降雨量的六分之一下完...
  • 企业家在线 发布于  2023-05-14 14:30  
  • 京郊民宿暂别高歌猛进市场转换中回归理性
  • 在市场短期调整过程中,京郊民宿只能以变应变,做出自己的特色。虽然现在消费者的选择更多了,但是周末到京郊走走的需求还是存在的,要想方设法吸引这些消费者住下来。 过去3年,北京郊区民宿一时“风光无限”。由于消费者假日出游半...
  • 企业家在线 发布于  2023-05-14 09:07  
  • Wine8.8发布,初步支持ARM64EC模块
  • 感谢IT之家网友华南吴彦祖的线索投递! ,Wine在经历了两周的开发之后,于今天发布了8.8版本更新。Linux、ChromeOS等平台通过Wine,可以运行Windows应用程序和游戏。 IT之家附Wine8.8版...
  • 企业家在线 发布于  2023-05-13 16:41  
  • 5·12护士节60000次练习成就一名雍禾医疗护士
  • 消费者对于毛发医疗服务提出了越来越高的要求,在此背景下,雍禾医疗提出“好医生,一人一案”战略的同时,也在不断地探索搭建“好医生、好护士”医疗团队,加入雍禾医疗的每一位雍禾护士,时刻践行至臻态度与专业服务。值此5·12护士...
  • 企业家在线 发布于  2023-05-13 09:34  

企业家在线© 2012-   X3.4