新知榜官方账号
2023-07-03 10:22:46
自从Midjourney发布v5之后,在生成图像的人物真实程度、手指细节等方面都有了显著改善,并且在prompt理解的准确性、审美多样性和语言理解方面也都取得了进步。相比之下,StableDiffusion虽然免费、开源,但每次都要写一大长串的prompt,想生成高质量的图像全靠多次抽卡。最近StabilityAI的官宣,正在研发的StableDiffusionXL开始面向公众测试,目前可以在Clipdrop平台免费试用。试用链接:https://clipdrop.co/stable-diffusion
StabilityAI的创始人兼首席执行官EmadMostaque表示,目前该模型仍然处于训练阶段,等参数稳定后将会开源;SD-XL在「握手」等图像细节方面会表现更好,几乎完全可控。StableDiffusionXL也并不是最终发布版的名字,并且也并非是v3,因为SD-XL的架构和SD-v2系列的模型架构非常相似。
Minimalistichomegymwithrubberflooring,wall-mountedTV,weightbench,medicineball,dumbbells,yogamats,high-techequipment,highdetail,organizedandefficient.简约的家庭健身房,橡胶地板,壁挂式电视,举重凳,药球,哑铃,瑜伽垫,高科技设备,高细节,组织和效率
下面几张SD-XL官方发布的例图,可以看出图像的质量已经非常能打了。不过有时候less并不代表more,有网友认为SD-XL为了摆脱「糟糕的品味」,设定了太多的规则,定制化空间越来越小,不符合大多数人的喜好。目前v1.5的StableDiffusion仍然是社区内最流行的基座模型。网友表示希望新版SD能够和SD2.1版本的嵌入、hypernetworkds和Lora模型保持兼容,再从零开始重训的话就太难受了。也有网友认为,SD-XL的表现和civit网站上网友分享的模型差不多,新模型的效果也并不是特别惊艳,也就是平均水平。
StableDiffusionXL模型具有以下特点:
需要注意的是,SD-XL可能与之前版本的插件不兼容。清晰可读的文字在v1系列和v2.1版本的StableDiffusion模型中,并不具备在图片中生成可读文本的能力。虽然SD-XL生成的文本信息并不总是准确,但确实得到了巨大的提升。
StableDiffusion在生成人体结构方面一直存在诸多问题,多几条腿、少个胳膊实在是太常见不过的问题,通常需要使用inpaint功能进一步对图像细节进行修正;或者是使用ControlNet的OpenPose功能从参考图像中复制人体的姿态。比如说SD-v1.5生成瑜伽的图像,经常会出现扭曲的人体。
SD-XL虽然生成的图像并不完美,不过在人体姿态方面已经有了显著的进步。更有美感(moreaesthetic)比如同样以屋子为主题,SD-XL可以生成更对称、视觉效果更好的照片。SD-XL在肖像照片上也有显著改进。
SD-XL虽然有很多优点,但仍然存在一些局限性。比如在添加一些无关紧要的关键字后,模型的风格可能会突然转变。问题的故障可能源于预览问题,在正式发布后该问题不知能否得到解决。
相关工具
相关文章
相关快讯
推荐
中国首款3A游戏上线,《黑神话:悟空》出圈!
2024-08-21 13:46
盘点15款AI配音工具,短视频配音有救了!
2024-08-12 17:11
短视频文案没创意?10大AI写作工具来帮你!
2024-08-05 16:23
Midjourney发布V6.1版本,我已分不清AI和现实了!
2024-08-01 15:03
我发现了一款国产AI绘画神器,免费易上手!
2024-07-25 16:40
7位AI考生做今年高考题,能过一本线吗?
2024-07-19 17:17
世界上第一所AI学校来了,80亿人只需要1位老师?
2024-07-18 17:12
Sora首部AI广告片上线,广告从业者危险了!
2024-06-27 13:44
OpenAI与中国说拜拜,国产AI如何接棒?
2024-06-26 15:18
人与AI会产生爱情吗,专家发话了!
2024-06-17 17:28