14｜数据清洗：挑战大量噪音的需求
键盘
你好，我是键盘，我们继续驯服 GPT。
数据的处理通常有两种类型，一种是上节课的“重建秩序”，所有的数据都是有用的，而且让你在有序的状态下可以轻松地填充更多内容。另一种，就是这节课我们要讲的典型情况“沙里淘金”。什么意思呢？就是说交给 GPT 处理的数据里，只有一部分是有用的，其他的全是干扰。我们把这种数据叫做脏数据（Dirty Read），里面的干扰项和多余的信息，就是噪音。
我会结合一个可调整多个参数的智能配图方案来讲解实现过程，搞定它，你的所有配图需求就不用再通过人力搜索了。另外，区别于之前分享过的 Unsplash 接口，这个新接口获取到的可商用资源，格局又打开了“亿”点，除了照片题材，它还支持插画、矢量图、视频等等。
人人都能用的“AI 清洗法”
我们的整活目标是让包含众多图片链接的数据流到自己手里，从中自动洗出想要的图片。这个思路同样适用于其他具备物料需求的场景，比如获取某段时间的一类数据、文章配图、宣传材料的视频和 BGM 等等。
实现原理比较简单，而且通用。以“清洗图片”为例，我简单描述下。
公开
同步至部落
取消
完成
0/2000
荧光笔
直线
曲线笔记
复制
AI
- 深入了解
- 翻译
- 解释
- 总结
本文介绍了利用GPT进行智能配图处理的方法，重点讲解了数据清洗的挑战和解决方案。作者详细描述了利用智能配图方案进行数据清洗的实现过程，包括获取数据、设计自己的接口以及清洗数据等步骤。文章强调了两个重点参数：编辑精选和干得“漂亮”，并给出了相应的请求链接示例。此外，文章还提到了手动测试的重要性，以及如何设计一行告诉GPT提取配图的Markdown模版。通过具体的实现步骤和技术细节，为读者提供了一种利用GPT进行数据清洗和智能配图处理的方法，展现了其技术特点和应用前景。整体而言，本文内容丰富，技术性强，对读者了解GPT智能配图处理方法具有重要参考价值。
仅可试看部分内容，如需阅读全部内容，请付费购买文章所属专栏
《零基础 GPT 应用入门课》，新⼈⾸单¥29
《零基础 GPT 应用入门课》，新⼈⾸单¥29
立即购买
© 版权归极客邦科技所有，未经许可不得传播售卖。 页面已增加防盗追踪，如有侵权极客邦将依法追究其法律责任。
登录 后留言
全部留言(5)
- 最新
- 精选
peterQ1：我让GPT给出一个产品的图片，GPT回答说“我是文本模型，无法提高图片”。这个问题怎么解决？老师的课里面好像能产生很多图片，怎么做到的？ Q2：课程中，老师用到了一些符号，比如： ##， / 等，好像GPT可以把这些符号当做编程中的规则一样执行。请问：这些符号是GPT本身规定的吗？还是GPT自己实时理解的？作者回复: 两个问题都涉及基础课程中的Markdown。 Q1：核心是用Markdown的图片链接来显示，有很多图片接口可以挖掘，比如Unsplash  关键词=你的图片关键词 Q2：像## 二级标题这种是Markdown的规范。 像<>这种用于隔断，帮助GPT分清描述和指令的，属于xml标签，还有很多非常灵活的方式，可以压缩表达，但不是“规定” 比如： 你可以用 Y 表示肯定。 用—>表示流程的下一步 用表示Apple 用#备注 表示备注 多试试，感受一下。
2023-07-01归属地：北京1
Seven七哥3.5的ChatGPT无法直接使用本节提供的prompt，解析不了的感觉，4.0是可以的，附一张3.5的截图： 好的，让我们开始： **步骤 1：** 将关键词翻译为英语 关键词: 阅读 **步骤 2：** 拼合成API链接 ```markdown https://pixabay.com/api/?key=替换你的key&q=reading&image_type=all&editors_choice=true&pretty=true ``` **步骤 3：** 插件判断 - N (请提供 JSON 或者目标链接) **步骤 4：** 提取目标图片并用Markdown渲染 ## 关键词 ![配图](the first "largeImageURL" in JSON) **步骤 5：** 输出名言 > “阅读是心灵的窗户。” - 哈尔德·布卢姆（Harold Bloom）作者回复: 真实的key有替换进去吗？ 如果有，就是 ChatGPT 链接或者JSON解析的稳定性问题。上个月还很差，存在段落文本伪装链接的情况。
2024-01-29归属地：陕西
6点无痛早起学习的和尚
数据清洗，我曾经用过 Python 然后去清洗一堆 json 里的数据，然后组装输出一句话，但是就实现这个功能而言，用 Python 实现优于 gpt作者回复: 利用插件市场的WebPilot解决联网和JSON解析的能力，一站式解决
2023-09-24归属地：北京- Geek_1ec717这两期的文章读起来都感觉有点混乱，这个没说清楚就跳到下一个，难懂
作者回复: 综合篇最后几篇确实比较复杂，疑问可以到群里补充交流。完课后我们看看迭代一下。
2023-06-30归属地：上海 - Seven七哥3.5无法解析本节给出的prompt： 好的，让我们开始： **步骤 1：** 将关键词翻译为英语 关键词: 阅读 **步骤 2：** 拼合成API链接 ```markdown https://pixabay.com/api/?key=替换你的key&q=reading&image_type=all&editors_choice=true&pretty=true ``` **步骤 3：** 插件判断 - N (请提供 JSON 或者目标链接) **步骤 4：** 提取目标图片并用Markdown渲染 ## 关键词 ![配图](the first "largeImageURL" in JSON) **步骤 5：** 输出名言 > “阅读是心灵的窗户。” - 哈尔德·布卢姆（Harold Bloom）2024-01-29归属地：陕西
收起评论