风险提示:理性看待区块链,提高风险意识!
稳定扩散3.5:稳定AI用新模型和扩展功能重新定义自己
首页 > 业界 > 区块链 2024-10-23 08:07
摘要
在Stable Diffusion 3 Medium遭遇挫折后,Stability AI在Stable Diffusion 3.5中重回正轨,提供可定制的模型,这些模型不受审查,快速且可供所有人访问 。
币界网报道:

Stability AI可能正在开始自己的救赎之路。在SD3 Medium令人失望之后,他们又回来了,推出了两款新机型7月份承诺:稳定扩散3.5大,稳定扩散3.5涡轮。

Stability在一份声明中表示:“6月,我们发布了Stable Diffusion 3 Medium,这是Stable Diffusion 3系列的第一个公开版本。这个版本没有完全符合我们的标准或我们社区的期望。”官方博客文章“在听取了宝贵的社区反馈后,我们没有快速解决问题,而是花时间进一步开发了一个版本,以推进我们改造视觉媒体的使命。”

在急于写这条突发新闻之前,我们生成了一些图片进行尝试——结果非常非常好。尤其是对于基础模型。

SD 3.5系列旨在在消费级系统上运行,甚至在某些标准下是低端系统,使高级图像生成比以往任何时候都更容易实现。是的,他们已经听到了对前一个版本的抱怨,所以这个版本有望变得更好——以至于他们的特色形象是一个躺在草地上的女人对恐怖秀的嘲讽当面临同样的挑战时,这种情况发生得更早。

图片:稳定AI

此版本的另一个重要方面是新的许可模式。Stable Diffusion 3.5采用更宽松的许可证,允许商业和非商业使用。小企业和收入低于100万美元的人可以免费使用和构建这些模型。

收入较高的公司必须联系Stability协商费用。相比之下,黑森林实验室提供其低端Flux Schnell是免费的,其中型Flux Dev是免费且非商业用途的,其SOTA型号Flux Pro是闭源模型(作为参考,Flux通常被认为是目前最好的开源图像生成器,至少在当前的后SDXL时代是这样。)

稳定扩散3.5有什么好处?

Stability AI发布了三个版本的Stable Diffusion 3.5,所有版本都满足了不同的需求:

  • 稳定扩散3.5大:这是最大的一个,有80亿个参数,旨在提供一流的图像质量和严格的即时遵守。它专为专业用途而设计,特别是在100万像素的分辨率下,但可以处理各种风格和视觉格式。

  • 稳定扩散3.5大涡轮:对于那些想用一点质量换取速度的人来说,这款精简版的Large型号是你的首选。它只需四个步骤即可生成高质量的图像,这与普通的SD3.5不同,后者需要大约30个步骤才能生成高质量图像。这相当于Flux Schell。

  • 稳定扩散3.5介质:该模型即将推出,具有25亿个参数,并针对消费硬件进行了优化。对于那些需要在0.25至200万像素的分辨率下获得稳定性能,同时又不牺牲易定制性的用户来说,这是一个中间地带。

这些模型更加灵活,允许用户根据特定的创意需求对其进行微调。如果你担心你的消费级GPU能否处理这个问题,Stability AI会支持你。我们自己的测试显示,在具有6GB VRAM的RTX 2060上,Large Turbo可以在大约40秒内吐出图像。


非量化的全脂版本在相同的低端硬件上需要3分钟以上的时间,但这就是质量的代价。

引擎盖下的改进

稳定性AI正在追赶Flux,Flux是可定制性的首选模型。为了改善用户体验,Stability重新构想了SD 3.5的行为方式。Stability说:“在开发模型时,我们优先考虑可定制性,以提供灵活的基础。为了实现这一点,我们将查询密钥规范化集成到转换器块中,稳定了模型训练过程,简化了进一步的微调和开发。”。

换句话说,你可以比以前更容易地调整和改进这些模型,无论你是想要创建自定义样式的艺术家还是想要构建AI驱动应用程序的开发人员。稳定甚至共享LoRA培训指南帮助事情更快地开始。

LoRA(低阶自适应)是一种微调模型以专注于特定概念的技术,无论是风格还是主题,而无需重新训练整个大型基础模型。

描述:同一代人没有LoRA与使用LoRA添加更多细节。图片:奇维塔

当然,灵活性带来了一些权衡。该模型现在非常有创意,以至于Stability警告说,“缺乏特异性的提示可能会导致输出的不确定性增加,美学水平可能会有所不同”

如果你仍然对Stable Diffusion 3.5持观望态度,而它的“不确定性”让你望而却步,那么这里有一些面向未来的建议——它支持“负面提示”,这意味着你的提示可以包括指令not做事情。对于那些想在不费力的情况下改进文本和图像生成的人来说,这是一个巨大的福音。

对于那些希望对自己的世代有更多控制权的人来说,这是一个很好的补充。此外,它似乎很擅长处理老式的SDXL风格的提示。事实上,在某些方面,SD3.5的提示风格比Flux更接近MidJourney,允许用户在不需要语言学学位.

除了定制,Stable Diffusion 3.5还在其他领域取得了进展:

  • 快速遵守:在遵循用户输入方面,Large模型现在可以与更大的模型相媲美,并且在图像生成器领域处于领先地位。稳定性保证了SD 3.5大拍Flux.1 Dev在快速粘附方面的表现,但在美学质量方面仍然没有。
图片:稳定AI
  • 图像质量:我们谈论的是生成能够承受一些最耗资源的模型的图像,而不会消耗GPU的内存。在Stability的基准测试中,Flux.1 Dev稍显领先,但SD 3.5 Large的效率更高,资源消耗更少。Sd 3.5 Large Turbo在附着力和质量方面与Flux.1 Schnell相当。

  • 风格多样性:无论您的目标是3D渲染、照片级真实感图像、线条艺术还是绘画风格,Stable Diffusion 3.5都可以处理。它处理的风格比Flux更广泛——至少在我们的快速测试中是这样。

是的,值得一提的是,它没有经过审查。SD3.5 Large可以制作某些类型的内容,包括裸体,但并不太困难,尽管它并不完美。无论好坏,该模型都没有被故意限制,因此它为用户提供了充分的创作自由(尽管可能需要微调和一些特定的提示才能达到最佳效果)。

这在SD3推出时受到了严厉的批评,并被指出是它在解剖学理解方面如此困难的主要原因之一。我们可以确认其生成NSFW图像的能力,然而,该模型与最佳Flux微调不在同一水平,但与原始Flux模型相当。

但公平的警告是:尽管SD3.5功能强大,但你们NSFW Furry艺术家不应该很快或根本不期待小马扩散模型。最受欢迎和最强大的NSFW模型的创建者证实,他们对开发SD3.5微调不感兴趣。相反,他们选择使用Auraflow作为基地。一旦完成,他们可能会考虑Flux。

对于那些修补匠来说,ComfyUI现在支持Stable Diffusion 3.5,允许使用基于签名节点的工作流进行本地推理。有很多工作流程示例可供使用,如果您正在努力降低RAM,但想尝试完整的SD3.5体验,Comfy推出了一个实验性的fp8缩尺模型这降低了内存使用率。

接下来是什么?

10月29日,我们将获得Stable Diffusion 3.5 Medium,不久之后,Stability承诺发布SD 3.5的Control Nets。

ControlNets承诺将带来针对专业用例量身定制的高级控制功能,它们很可能将SD3.5的功能提升到一个新的水平。如果你想了解更多关于他们的信息,你可以阅读我们的摘要SD 1.5的简要指南然而,使用控件可以让用户做一些事情,比如选择拍摄对象的姿势、玩弄深度图、根据涂鸦重新想象场景等等。

stable diffusion Jose Lanz 11
原始图像与使用Controlnet影响子节点姿势的生成。图片来源:Jose Lanz

那么,稳定扩散3.5是通量杀手吗?不完全是,但它肯定开始看起来像一个竞争者。一些用户仍将吹毛求疵尤其是在SD3 Medium的惨败之后。但是,随着更好的解剖处理、更清晰的许可证以及及时遵守和输出质量的显著提高,很难说这不是向前迈出的一大步。稳定人工智能正在从过去的错误中学习,并朝着一个所有人都能更容易地使用先进人工智能工具的未来迈进。

发表评论
发表评论
暂无评论
    相关阅读
    币界百科
    币界资讯
    Robinhood首席执行官Vlad Tenev支持AI,Crypto和Trump政策,预测监管转变将推动创新和市场增长。
    区块链
    2025-03-13 21:50:45
    阿里巴巴集团(Alibaba Group)推出了其AI Assistant应用程序的新版本,该应用程序将由其自己的旗舰QWEN AI推理模型提供支持。
    区块链
    2025-03-13 21:10:49
    总理凯尔·斯塔默(Keir Starmer)正在推动一项450亿英镑(580亿美元)的成本削减计划,该计划将用人工智能,削减公务员工作和数字化公共服务来代替官僚机构。
    区块链
    2025-03-13 20:53:38
    Skyren Dao实际上是在分发免费的炸玉米饼,以推动采用加密货币的采用,并且它起作用。在预售加热时,了解这种营销活动如何使新用户进入Defi。
    区块链
    2025-03-13 20:41:51
    在加密货币交易领域,PEIPEI永续合约与火币交易所的结合备受关注。火币交易所作为行业内的知名平台,有着丰富的经验和强大的实力。其曾在合约业务上表现出色,季度合约持仓量亮眼。如今若引入PEIPEI永续合约,有望为投资者带来新的交易体验和机会。PEIPEI永续合约自身特点也可能在火币平台上得到充分发挥,为市场注入新活力,值得投资者DYOR,密切关注。
    区块链书籍
    2025-03-07 09:23:01
    2025年2月20日Pi Network开放主网后,Pi币价格遭遇极大波动。开盘价1.84美元,数小时内就跌至0.64美元低点,24小时内从2美元高点暴跌超50%,交易量飙升至每天12亿美元以上,抛售压力巨大。价格大幅下跌引发了对流动性问题和项目整体稳定性的担忧。其下跌原因包括早期矿工套现、未在币安上市以及Bybit的诈骗指控等。若当前抛售压力持续,Pi币可能测试0.71美元支撑位,失守则下行趋势加剧,投资者需密切关注Pi币后续走势,谨慎做出决策。
    区块链书籍
    2025-03-07 10:53:30
    在加密货币市场持续发展的2025年,币圈交易所众多。币安作为全球最大的加密货币交易所,交易手续费低且交易速度快,用户覆盖全球180多个国家和地区,但曾遭受黑客攻击。Coinbase是美国领先平台,安全性高、可信度强,不过手续费较高。FTX虽经历风波但仍有一定影响力。火币为全球百万级用户服务,不过也存在安全隐患。此外,OKX、Kraken、Gate.io等也各有特色,它们为投资者提供了多样化的选择。了解这些交易所的特点和优劣势,有助于投资者在币圈做出更合适的决策。
    交易所百科
    2025-03-07 13:02:11
    在数字资产交易领域,ADA交易所官网和GOG杠杆备受关注。ADA虽无官方交易所,但有可靠的区块链在线交易平台可供选择,这些平台注重技术创新与用户体验,能提供数字资产保障和便捷交易服务。而GOG杠杆凭借独特交易模式,为投资者带来更多交易可能性,不过杠杆交易是把双刃剑,市场波动时可能导致亏损。投资者参与其中需DYOR,谨慎决策。
    数字货币百科
    2025-03-07 11:25:50
    在当今数字化的时代,MOBILE平台的重要性不言而喻。然而,很多人可能并不清楚MOBILE平台究竟具备哪些关键功能。本文将为你揭秘MOBILE平台必备的5大功能,帮助你更好地了解和利用这一平台。无论你是新手还是有一定经验的用户,都能从中获取有价值的信息,解决你在使用MOBILE平台过程中的疑惑,提升使用体验。
    矿业百科
    2025-03-07 21:58:59
    上周六,特朗普突然宣布推出专属加密货币迷因币$TRUMP,瞬间引发市场抢购狂潮。首批发行代币总市值短时间内突破240亿美元,成为加密货币市场热门话题。首轮$TRUMP发币2亿枚,价格0.18美元,特朗普本人通过名下公司持有80%股份。发币消息发布后几小时,$TRUMP最高涨幅接近150倍。要知道,迷因币通常作为投机工具,无实际经济或交易价值,价格波动大、风险高。特朗普此举让众多美国MAGA粉丝措手不及,有人质疑“让美国继续伟大”是否变成了“让特朗普继续收割”。还有人计算出不同价格下特朗普超越福布斯首富们的
    交易所知识
    2025-03-03 21:34:39
    在区块链与加密货币的世界里,ARCx合约与ONT交易平台备受瞩目。ARCx作为一个合成资产协议,通过其本地稳定币STABLEx在DeFi中发行各种形式的资产信贷,计划支持各类资产以提高资本效率,释放用户钱包中闲置资产的价值。而ONT币源自Ontology公有区块链项目,该项目旨在打造支持分布式应用的基础设施,其双层架构设计提升了网络可扩展性,智能合约2.0更赋能业务创新。ONT币在市场上也展现出较强韧性与潜力,其社区生态繁荣。那么ARCx合约有着怎样的发展前景?ONT交易平台又能否凭借自身优势在竞争激烈的
    钱包知识
    2025-03-04 10:45:10
    在加密货币交易的热潮中,S杠杆与DBR永续合约成为了备受关注的焦点。DBR永续合约作为创新的金融衍生品,允许交易者无需持有标的资产即可押注,且无到期日能无限期持有。S杠杆则能放大交易规模,让投资者有更多参与机会。不过,它们虽有全天候交易、放大交易规模和对冲风险等优势,但也面临清算、市场波动和杠杆风险等问题。比如BitMEX和Bitget等交易所的DBR永续合约交易,分别提供高达50倍和20倍的杠杆。对于投资者而言,深入了解S杠杆与DBR永续合约的特点和风险,才能在这场充满机遇与挑战的交易中做出更明智的决策
    币种知识
    2025-03-03 17:00:40
    在当今蓬勃发展的加密货币领域,火币交易所官网一直是众多投资者关注的焦点。火币作为行业内颇具影响力的交易平台,其官网为用户提供了便捷的交易通道。而恒星币交易在市场中也有着独特的地位和潜力。恒星币以其高效的交易速度和低手续费等优势吸引着不少投资者。然而,数字货币市场变幻莫测,火币交易所官网在恒星币交易方面面临着诸多机遇与挑战。投资者在参与恒星币交易时,需充分了解市场动态和交易规则,谨慎做出决策。火币交易所官网如何在保障用户安全的前提下,更好地促进恒星币交易的发展,值得我们深入探讨和关注。
    矿业知识
    2025-03-04 10:49:01
    近期SOL币市场动态不断。从价格方面来看,其兑人民币价格有所波动,如曾报961.48元,24H波幅12.51% ,最低913.88元等。在交易层面,Binance、BOSS Wallet等平台频现大额成交,像BOSS Wallet有成交单价240USDT,共成交15274.28个等多笔大额交易。此外,SOL索拉纳还曾站上169.59美元/枚,涨幅达2.00%,不过24小时跌 - 8.151% ,通过k线图分析目前呈下降趋势,市场抛售压力增加。投资者需密切关注其后续走势,谨慎操作。
    交易所知识
    2025-03-04 10:40:33
    推荐专栏
    热门币种
    更多
    币种
    美元价格
    24H涨跌幅
    BTC比特币
    60,963.61 USDT
    ¥435,103.38
    -2.72%
    ETH以太坊
    3,368.69 USDT
    ¥24,042.67
    -0.3%
    BNB币安币
    580.65 USDT
    ¥4,207.97
    +4.843%
    USDT泰达币
    1.02 USDT
    ¥7.25
    -0.19%
    SOL
    135.96 USDT
    ¥970.36
    +7.66%
    USDC
    1.00 USDT
    ¥7.15
    -0.01%
    TON
    7.59 USDT
    ¥54.14
    +4.55%
    XRP瑞波币
    0.47720 USDT
    ¥3.41
    +0.48%
    DOGE狗狗币
    0.12210 USDT
    ¥0.87140
    +2.43%
    ADA艾达币
    0.71190 USDT
    ¥5.16
    -1.221%
    热搜币种
    更多
    币种
    美元价格
    24H涨跌幅
    Filecoin
    2.7467 USDT
    ¥19.91
    +1.43%
    SuperRare
    0.088221 USDT
    ¥0.64
    -7.53%
    比特币
    81716.59 USDT
    ¥592,200.13
    +0.93%
    以太坊
    1874.26 USDT
    ¥13,582.76
    +1.52%
    Solana
    124.28 USDT
    ¥900.66
    +0.55%
    柚子
    0.49790 USDT
    ¥3.61
    +3.17%
    Horizen
    8.9844 USDT
    ¥65.11
    +4.22%
    狗狗币
    0.1669 USDT
    ¥1.21
    +2.83%
    dYdX
    0.6071 USDT
    ¥4.40
    +3.99%
    Shiba Inu
    1.206E-5 USDT
    ¥0.00
    +1.17%
    Gatechain Token
    20.4023 USDT
    ¥147.86
    +3.47%
    Conflux
    0.07867 USDT
    ¥0.57
    +2.14%
    最新快讯
    更多
    CoinbaseVentures宣布为链上投资平台Echo.xyz的“GroupLead”
    2025-03-13 23:12:02
    币界网最新行情晚报:BTC比特币价格达81665.03美元/枚,日内跌幅-1.02%
    2025-03-13 23:06:41
    链上AI模型验证和租赁市场Aura完成550万美元种子轮融资,DaxosCapital等领投
    2025-03-13 23:01:19
    何一支持CZ尝试申请特赦:相信美好的事情总会发生
    2025-03-13 22:53:08
    币界网最新行情晚报:BNB币安币价格达576.99美元/枚,日内跌幅-3.51%
    2025-03-13 22:48:09
    币界网最新行情晚报:BNB币安币价格达577.93美元/枚,日内跌幅-1.10%
    2025-03-13 22:48:08
    PPI数据公布后美联储3月降息概率仅为1%
    2025-03-13 22:47:21