ChatGPT做爬虫的第一步

最新推荐文章于 2024-02-27 14:48:37 发布

原创最新推荐文章于 2024-02-27 14:48:37 发布 · 7.8k 阅读

9 ·

CC 4.0 BY-SA版权

文章标签：

#chatgpt #爬虫 #node.js

chatgpt 专栏收录该内容

17 篇文章

订阅专栏

文章介绍了一种使用Nodejs和https、fs模块下载图片的方法，通过封装函数实现。原始代码采用回调方式，后被要求改写成await异步处理。此外，提到了其他替代工具如Bard和NewBing。

做爬虫就是搞数据, 专业的人做专业的事, ChatGPT阅虫无数, 搞个小爬虫, So Easy!

我知道可以百度到下载图片的代码, 但是我不想百度了, 一切交给ChatGPT

你只需要问他: 怎么用Nodejs下载图片?

其中，url是图片的地址，filePath是保存图片的本地路径。使用https模块发送GET请求获取图片，然后使用fs模块创建可写流并将图片写入本地文件。

它在代码后面还带上了注释, 你问其他人能享受到这个待遇吗?

代码我测试过了, 正常可用.

界面怎么这么素

因为ChatGPT老要登录, 登录太麻烦了, 所以就写了个非常简单的网页, 直接调用ChatGPT的API; 如果你要我写的网页, 公众号回复 api网页

自己写, 自己用, 比较放心, 不用担心泄露apiKey;

别人的网页, 别人的app, 把你的号整封了咋弄?

函数封装

这是我自己封装的函数

function downloadImg(imgUrl) {
  let url = "https://xxx.xxx";
  const filePath = "image.jpg";

  https.get(imgUrl, (res) => {
    res.pipe(fs.createWriteStream(filePath));
    console.log("下载完成");
  });
}

这个用的是http回调, 不好使, 我就让ChatGPT给我改成await的那种

口令是: 把上面的下载图片代码, 改成await的形式

你只需要说一句话,

你想到的, 你没想到的, 都给你整的明明白白的, 小小爬虫第一步, 走的稳稳当当

还用的着百度?

大可不必

用不了GPT怎么办?

可以用谷歌的Bard

也可以用微软的NewBing