sql
关注
分享
扫一扫
木易小猿q_3456069079
不念千古,只爱当下!
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
sql 基础
1. 建立数据库连接#cunnect() 若数据库文件存在则打开,若不存在则创建import aqlite3connect = sqlite3.connect('database.db)####### 创建表的sql语句 ######### CREATE TABLE 表名(字段1 字段类型 约束条件, 字段2 ......) # INTEGER 无符号整型 # CHAR ...原创 2018-07-26 19:22:09 · 228 阅读 · 0 评论 -
用python正则表达式爬取糗事百科并储存在sql中
程序主代码(详情标注)# -*- coding: utf-8 -*-__author__ = '木之易'__date__ = '2018/8/7 11:20'from urllib import requestimport reimport sqlite3from tools import StrTools"""QsbkSpiderurl 地址html 网页源代码...原创 2018-08-10 20:31:11 · 411 阅读 · 0 评论 -
bs4主要知识点介绍及实例解析---利用bs4爬取伯乐在线(分别存储在数据库和xls表中)
bs4主要知识点介绍及实例讲解bs4 是第三方解析html数据的包from bs4 import BeautifulSouplxml 解析读取html的第三方解释器,解析速度快,底层通过c实现# 1.网页源代码 2.解析器名称bs = BeautifulSoup(html, 'lxm...原创 2018-08-15 20:46:45 · 892 阅读 · 0 评论 -
创建python工具存储类文件(处理解析数据时出现的特殊字符,创建动态存储功能函数,方便引用)----实例: bs4爬取伯乐在线
创建工具存储类tools文件: 内含处理解析数据时出现的特殊字符的方法, sql储存数据的动态方法, excel表格存储数据的动态方法功能文件创建好之后, 可以在不同的爬虫项目中进行引用,可以在以后码爬虫项目时省去大量的时间精力# -*- coding: utf-8 -*-__author__ = '木之易'__date__ = '2018/8/16 9:40'import re...原创 2018-08-16 20:39:22 · 324 阅读 · 0 评论 -
基于Scrapy_redis部署scrapy分布式爬虫
基于Scrapy_redis部署scrapy分布式爬虫1.使用命令行工具下载工具包 scrapy_redis（若是虚拟环境可下载在虚拟环境中）2.准备一个写好的没有错误的爬虫项目（这里以51job为例）3.使用pycharm打开项目,找到settings文件,配置scrapy项目使用的调度器及过滤器4.修改spider爬虫文件 5.如果连接的有远程服务,例如...原创 2018-09-26 22:00:47 · 289 阅读 · 0 评论 -
mysql安装过程详述及在cmd命令行中的mysql命令
mysql安装1. 安装mysql遇到这个问题，按照提示去下载.NET Framework4.0并安装，然后重启地址：https://www.microsoft.com/zh-cn/download/details.aspx?id=177182. 选择开发默认版本，直接下一步3. 下一步，点是4. 点击execute，会进行下载，等待下载完成5....原创 2018-10-13 11:39:27 · 759 阅读 · 0 评论