執筆冩回憶

1、创建Scrapy项目scrapy startproject qidian2.进入项目目录，使用命令genspider创建Spiderscrapy genspider wanben qidian.com3、定义要抓取的数据（处理items.py文件）import scrapyclass QidianItem(scrapy.Item): # define the fields for your item here like: # 书名 book_name

1、创建Scrapy项目scrapy startprojectt XPC_REDIS2.进入项目目录，使用命令genspider创建Spider（注意后面允许爬取的域要增加）scrapy genspider xpc_redis xinpianchang.com3、定义要抓取的数据（处理items.py文件）# -*- coding: utf-8 -*-import scrapyclass XpcRedisItem(scrapy.Item): # 视频id v

1、创建Scrapy项目scrapy startproject XPC2.进入项目目录，使用命令genspider创建Spiderscrapy genspider xpc xinpianchang.com openapi-vtom.vmovier.com3、定义要抓取的数据（处理items.py文件）# -*- coding: utf-8 -*-import scrapyclass XpcItem(scrapy.Item): # 视频id v_id = sc

# 抓取http://www.allitebooks.org/page/1/ 作者、书名、封面图链接import requestsimport jsonfrom lxml import etreefrom bs4 import BeautifulSoupclass AllBooks(object): def __init__(self): self.base_url = "http://www.allitebooks.org/page/{}" self..

一、python3安装mysqlpip install pymysql二、连接数据库操作import pymysqldb=pymysql.connect(“localhost”,”root”,”123456”,”数据库名)# 创建游标对象cursor = db.cursor()# 执行sql语句cursor.execute(“select version()”)# 获取返回结果...

# 输入用户名、密码# 密码加密# 判断redis中是否记录了用户名，如果有则成功（redis只会记录一条name数据）# 如果redis中没有用户名，则到mysql中查询# 从mysql中查询成功后，将用户名记录到redis中#!/usr/bin/env python# coding=utf-8# 业务过程如下：# 输入用户名、密码# 密码加密# 判断redis中是否记...