
爬虫
三十岁开始学编程的大叔
这个作者很懒,什么都没留下…
展开
-
一个想法造一天——micropython究极爬虫
不得不说onenet的文档就是坨答辩,每次去都翻半天,就特几个get put post方法,绕绕绕,而且文档一直没更,结构逻辑特乱,新人根本找不到地方,耐着性子搞好了,最后还研究了一下可视化,app的不能用了,可视化基础版还可以,这里错怪onenet了,做好的在这。想搞定PC端的爬虫,然后玩了下github action挺好,初步的会了,就是push仓库那里总是错,不知道差哪了。最后听说用github action搞爬虫容易封号,吓得我赶紧把一小时一爬改成了一天两爬,再封我我认了。今天琢磨了一天,实现了。原创 2023-01-25 18:02:18 · 831 阅读 · 0 评论 -
2022 python获取和风天气 web api v7版本
这个其实没啥说的,主要是网上的都是V6,甚至V5版本,官方我又没找到具体例程,所以就写了一个,和风作为众多天气获取的渠道我感觉还算可以,好处是比较稳定,缺点就是跟api类的天气获取一样,免费版的有次数限制,不过对于个人用户而言绝对是够用了,还有一点就是返回的数据采用gzip压缩,如果你的requests库不是那么新不能自动解压缩,还是得手动解压缩一下。上代码:import requestskey='XXX' #我自己的和风天气key,你最好自己注册一个,免费的location='10107010原创 2022-03-30 07:20:39 · 1936 阅读 · 0 评论 -
帮我哥用seleium写了个自动填表的爬虫,留存一下
import xlrdfrom selenium import webdriverimport timeworkxls =xlrd.open_workbook("test.xls")worksheet = workxls.sheet_by_index(0)row =worksheet.nrows-1serial=[0 for i in range(row)]weight=[0 for i in range(row)]volume=[0 for i in range(row)]ser原创 2020-10-28 06:41:42 · 405 阅读 · 0 评论