藏何的专栏

# coding=utf-8import scrapyfrom scrapy.selector import Selectorclass LoginSpidersPyw(scrapy.Spider): #scrapy crawl LoginSpiders 定义爬虫的名称 name = "LoginSpiders" #定义允许抓取的域名,如果不是在此列表的域名则放弃抓

学习目的：1、字符串的拼接与输出2、循环输出内容3、输出网页内容4、Post与Get读取传输数据# coding=utf-8import urllibimport urllib2import jsonprint "1、字符串的拼接与输出"#登录地址url="http://v.pyw.cn/login/check"#登录账户名username="15880xxx

爬取流程：模拟登录→获取Html页面→正则解析所有符合条件的行→逐一输出符合条件的行的所有列详细代码# coding=utf-8import urllibimport urllib2import cookielibimport reclass Pyw(): #初始化数据 def __init__(self): #登录的Url地址

核心代码： ####写入Csv文件中 with open(self.CsvFileName, 'wb') as csvfile: spamwriter = csv.writer(csvfile, dialect='excel') #设置标题 spamwriter.writer