Phoebexiang的专栏

想要学习Python爬虫，如何入门呢？

 想复习一下SQL语句，想着要搭配Python来使用，干脆搭配好环境，实际执行吧！首先安装SQL，过程是曲折的：1. 版本：起先下载了一个MySQL，安装的时候要求Python是3.4的，我的Python是2.7，所以放弃，找新的版本；2. 下载了一个5.XX的绿色版本，无奈没有用过数据库，参考安装步骤用了一下，结果成功，但是自己却不知所所；3. 继续搜索“Python MySql”，找到一个教程...

import csvheaders = ['ID','UserName','PassWord','Age','Country']rows = [{'ID':1001,'UserName':"qiye",'PassWord':"qiye_pass",'Age':24,'Country':"China"}, {'ID':1002,'UserName':"Mary",'PassWo...

# -*- coding: utf-8 -*-import urllibimport urllib2import reimport osfrom lxml import etreeurl = 'http://bugzilla.bmsoft.cn/buglist.cgi?bug_status=NEW&bug_status=UNCONFIRMED&bug_status=CO...

以防睡着，开始翻译吧！import scrapyclass QuotesSpider(scrapy.Spider): name = "quotes" def start_requests(self): urls = [ 'http://quotes.toscrape.com/page/1/', 'htt

Spidersspiders是一些用来定义某个或某几个网站如何被抓取的类，包括如何执行爬取，如何从页面提取结构化的数据。换句话说，spiders是用来自定义爬取和解析行为的。一个爬虫的过程基本过程为：1. 从开始给定的URLs(可在start_urls中定义)，默认使用start_requests()方法 发出最初的请求开始爬取，指定callback函数parse，用来处理对请求的响应

http://www.runoob.com/python/python-reg-expressions.html#!/usr/bin/env python# -*- coding: utf-8 -*-import codecsimport os.pathimport repredefClassesFile = "F:\DL\labelImg\data\predefined_cl

#-*- coding:UTF-8 -*-import sysimport osimport codecsdef ReadFile(filePath,encoding): with codecs.open(filePath,'r',encoding) as f: return f.read()def WriteFile(filePath,u,encoding)