- 博客(12)
- 资源 (1)
- 收藏
- 关注
RSS订阅转载 for循环将字典添加到列表中出现覆盖前面数据的问题
for循环将字典添加到列表中出现覆盖前面数据的问题 转自：https://www.cnblogs.com/ellisonzhang/p/10241553.html 字典key相同，会导致列表引用的字典为最后一次生成的字典 可在FOR循环内生成空字典，避免覆盖 ...
2019-05-09 21:55:01
1001
原创 python3.4 安装scrapy
安装scrapy需要安装twisted python3.4版本下载地址http://fstab.net/pypi/simple/twisted/
2019-03-21 09:07:21
514
原创 python3.4安装pyspider
pip3 install pyspider报错： pycurl有问题 首先安装wheel pip3 install wheel 访问https://pypi.org/project/pycurl/7.43.0/#files 下载相应版本 pip3 install 存放目录\pycurl-7.43.0-cp34-none-win32.whl pip3 install pyspider 测试成功 ...
2019-03-20 18:45:35
403
原创 手机跳屏处理
手机跳屏处理 参考地址：http://tieba.baidu.com/p/5321575930 红米老机折腾 设置‘’声音和振动‘’里开启触摸时振动，明确跳屏为HOME键及菜单键异常导致 处理方法：可通过屏蔽二键达到解决跳屏目的 1、下载红米开发版卡刷包，具体刷机教程参考小米官网 http://www.miui.com/thread-16626603-1-1.html 2、小米商店下载ES 打开R...
2019-03-15 10:12:43
756
转载 MTP相关配置，USB连接手机
https://wenku.baidu.com/view/a4b1a5ea51e79b896902263f.html https://blog.youkuaiyun.com/chenlycly/article/details/80869055 在设备管理器，打开打问号的MTP属性，在详细信息页获取VID及PID 在C盘Windows文件夹下的Inf文件夹下（完整路径： c:\windows\inf\wpdmt...
2019-03-15 09:47:54
1617
原创 sqlite学习笔记
1、UNIQUE constraint failed: user.userid 违反唯一性约定，意味表中已有相同的键值 2、rowcount 使用Cursor对象执行insert，update，delete语句时，执行结果由rowcount返回影响的行数，就可以拿到执行结果。 ...
2019-03-13 10:54:48
202
原创 python3 练手：爬取爱问知识人，运用sqlite3保存数据
python3 练手：爬取爱问知识人 参考地址：https://cuiqingcai.com/1972.html 获取页面：https://iask.sina.com.cn/c/74.html 分析：获取每个问题的标题及答案地址，访问答案页面获取问题具体内容，答案内容，作答者，作答时间，构造成字典形式保存进数据库 主程序： def main(): datadict = get_html(url...
2019-03-12 23:31:19
315
转载 （转载）用pymysql代替MySQLdb
原文地址：https://www.cnblogs.com/anpengapple/p/7127580.html 连接数据库： conn = pymysql.connect(host=host, user=user, passwd=password, db=db) 创建游标： cur = conn.cursor() 执行SQL： cur.execute(“INSERT INTO table VALU...
2019-03-10 15:16:22
675
转载 (转载)Python正则表达式中的re.S的作用
原文地址https://www.cnblogs.com/huchong/p/8290340.html 如果不使用re.S参数，则只在每一行内进行匹配，如果一行没有，就换下一行重新开始，不会跨行。而使用re.S参数以后，正则表达式会将这个字符串作为一个整体，将“\n”当做一个普通的字符加入到这个字符串中，在整体中进行匹配。 ...
2019-03-10 15:07:20
286
原创 python3 练手：爬百度贴吧
python3 练手：爬百度贴吧 参考原文地址：https://cuiqingcai.com/993.html 贴吧：https://tieba.baidu.com/p/3138733512?see_lz=1&pn=1&red_tag=0231085142 目标：获取文章标题，总页数，帖子内容，保存到文本文件。 实现： # !/usr/bin/env python # -*- e...
2019-03-09 22:26:49
247
转载 python3练手：爬糗事百科
python3 练手：爬糗事百科 参考原文地址： 静觅 » Python爬虫实战一之爬取糗事百科段子https://cuiqingcai.com/990.html 糗事百科地址：https://www.qiushibaike.com/hot/page/1/ 每页显示25则糗事，糗事内容在…内 目标：爬取糗事内容并在每按一次回车时显示一则糗事，当按下"q"键时结束
2019-03-08 22:29:54
307
原创 初学爬虫小结
初学爬虫小结 requests.get 带参数headers 可实现简单反爬 soup.find_all 找全部跟参数有关节点生成列表 getText() 获取节点文本 soup.find(‘span’,attrs = {‘class’,‘next’}).find(‘a’) 获取a标签 next_page[‘href’] 获取‘href’属性 codecs.ope...
2019-03-06 18:51:22
378
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人