13|前浪DALL-E 2:帮你魔改经典画作
南柯
你好,我是南柯。
通过上一章的学习,我们已经掌握了 AI 绘画的基础知识,了解了扩散模型、CLIP 模型、自回归模型等模块的基本原理。从今天开始我们进入进阶篇的学习,我会带你基于已经了解的基础知识,继续探索业界最新最火的 AI 绘画模型。学完这部分内容,AI 绘画的黑魔法在你面前就不是秘密了。
这一讲,我们将要学习的是引爆本轮 AI 绘画技术热潮的明星模型:DALL-E 2。
DALL-E 2 是 2022 年 4 月由 OpenAI 发布的 AI 绘画模型,它的绘画效果相比过去的工作有了质的飞跃,而且它提出的 unCLIP 结构、图像变体能力也被后来的方法所效仿。我们只有真正理解了 DALL-E 2,才算拿到了进入 AI 绘画世界的钥匙。
初识 DALL-E 2
DALL-E 这个名字源自西班牙艺术家 Salvador Dali 和皮克斯动画机器人 Wall-E 的组合。如果你想体验 OpenAI 的 DALL-E 2 原汁原味的效果,可以使用 Edge 浏览器 NewBing 的 AI 绘画能力。目前,NewBing 的 AI 绘画能力还没有向中国大陆地区开放,需要你发挥聪明才智来体验它。如果你有好的办法,也欢迎你分享在评论区。
比如我们要求 DALL-E 2 帮我们生成一只可爱的精灵。你可以点开图像查看效果。
公开
同步至部落
取消
完成
0/2000
荧光笔
直线
曲线
笔记
复制
AI
- 深入了解
- 翻译
- 解释
- 总结
DALL-E 2是OpenAI于2022年4月发布的AI绘画模型,采用了创新的unCLIP结构和图像变体能力,具有引人注目的绘画效果。该模型不仅可以生成高清图像,还具有图像变体、图像融合和局部编辑等多种有趣功能,为用户提供了强大的创作和编辑能力。其工作原理主要包括使用CLIP提取文本表征,通过扩散模型将文本表征转换为图像表征,然后使用另一个扩散模型指导图像的生成。DALL-E 2的结构简单明了,但具有强大的AI绘画能力,为读者提供了深入了解AI绘画技术的机会。然而,DALL-E 2也存在一些局限性,如处理逻辑关系、生成指定文字内容的图像和复杂场景方面的不足。尽管如此,DALL-E 2的处理思路仍然对设计师、产品经理等有启发。
仅可试看部分内容,如需阅读全部内容,请付费购买文章所属专栏
《AI 绘画核心技术与实战》,新⼈⾸单¥59
《AI 绘画核心技术与实战》,新⼈⾸单¥59
立即购买
© 版权归极客邦科技所有,未经许可不得传播售卖。 页面已增加防盗追踪,如有侵权极客邦将依法追究其法律责任。
登录 后留言
全部留言(3)
- 最新
- 精选
- 徐大雷老师,在初识 DALL-E 2 这个章节里面,生成图像变体,图像融合是怎么在微软必应里面操作的?谢谢
作者回复: 你好。体验DALL-E 2,需要安装最新的edge浏览器,然后使用科学上网工具,将所属地点选择为美国。使用NewBing的Chat功能,体验DALL-E 2的文生图功能。据我所知,当前DALL-E 2的图像变体和图片融合功能还不能在bing中体验。如有更新,欢迎更正~ 希望能帮助到你。
2023-09-05归属地:湖北 - peter本讲所说的DALL-E 2,其能力低于SD和Midjourney吧。
作者回复: 你好。DALL-E 2的整体表现不如SDXL、Midjourney等模型,和SD1.x谁优谁劣没有定论。我个人的看法,DALL-E 2不如MJ很大一部分原因是训练数据不够美观。欢迎多多交流探讨~
2023-08-16归属地:北京 - 不会数数关于必应生成图片的例子并不合适,red furry monster 翻译成中文应该是红毛怪兽, 和红发精灵的描述完全不一样,按照稍微正常点的翻译生成的图,得到的风格是相似的。
作者回复: 你好。感谢你的反馈。在这个例子中,我们对中文prompt做调整应该可以得到和英文风格类似的效果,需要尽可能保持中文描述足够细节和准确。这里更多是想说明中文prompt需要先翻译为英文prompt才能指导DALL-E 2进行AI绘画。再次感谢反馈!
2023-08-16归属地:北京
收起评论