
python
codsing
不做下一个谁,只做第一个我
展开
-
动态页面内容抓取并保存json文件
话不多说,直接上代码#!/usr/bin/env python# -*- coding: utf-8 -*-# @Time : 2020-03-26 20:52# @Author : 蓝狼# @File : scrapy3.py# @Desc : 抓取动态页面到json文件import jsonimport threadingimport timeim...原创 2020-03-26 22:26:41 · 639 阅读 · 0 评论 -
数据抓取实战demo
话不多说,直接上代码import requestsimport pymongofrom pyquery import PyQuery as pqimport reimport loggingfrom urllib.parse import urljoinlogging.basicConfig(level=logging.INFO, format='%(asctime)s - ...原创 2020-03-22 23:42:55 · 392 阅读 · 0 评论 -
python之pyquery
话不多少就是上代码#!/usr/bin/env python# -*- coding: utf-8 -*-# @Time : 2020-03-17 21:16# @Author : 蓝狼# @File : star_data_scrapy.py# @Desc : 明星资料抓取import timeimport pymysqlimport requests...原创 2020-03-18 00:00:15 · 260 阅读 · 1 评论 -
python之多线程图片抓取
站点目标:https://www.2717.com/编写脚本:import osimport threadingimport timeimport requestsfrom bs4 import BeautifulSoupheaders = { 'user-agent': 'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_3...原创 2020-03-08 16:25:29 · 3211 阅读 · 0 评论 -
python之知识点总结
作为初学Python的小白来说,记录一些学习过程中遇到的问题是十分有必要的。 1)列表的声明方式不同,操作不同 a = b = []ora = []b = [] 第一种方式直接导致变量a与b的值是一致的,这个和PHP是有区别的。 2)对象可变性 在 python 中,strings, tuples, 和 numbers 是不可...原创 2018-12-09 22:46:10 · 128 阅读 · 0 评论 -
Python之注意事项
在学习Python的过程遇到了很多的坑,在此总结一下,继续努力学习 1. Python文件的名称 给一个Python脚本命名的时候,注意不要与自带类库的名称一样,否则,会报模块不存在或者模块中的某个方法不能使用和缺失。...原创 2018-12-09 22:11:02 · 205 阅读 · 0 评论