- 博客(5)
- 收藏
- 关注
RSS订阅原创 centos虚拟机安装MySQL数据库的报错
关于我想把爬取的数据保存在数据库中，而虚拟机安装数据库出现种种报错。 前几天我用scrapy在网站上爬取了一些数据，本打算在centos虚拟机中安装个mysql数据库，可是种种报错，今天正好来了兴趣便开始网上搜各种资料以便于解决问题。 一开始我是用的centos的yum源下载mariadb,可是就是没办法打开。后来就打算在网上下载mysql用secureCRT的rz直接传到了虚拟机上，然后经过解压到虚拟机里，就这样错误开始出现。 一.mysql启动时报错，忘了报的啥错，其中有一个指向我的localhost.
2022-02-26 15:54:42
1901
原创 crawlspider案例
python 爬虫中的crawlspider案例（以下载读书网数据为列） 利用scrapy中带的管道存储数据 一.打开``命令行 注意：运行scrapy的项目时需要在venv的目录下创建（我自己尝试的是，在其他地方无法调用一些库，个人所测是） scrapy startproject scrapy_dushuwang_3 #创建项目 cd \scrapy_dushuwang_3\scrapy_dushuwang_3\spiders #跳转到spiders路径 scrapy genspider -
2022-02-24 20:45:58
574
原创 scrapy中的链接提取
关于scrapy的一小部分（链接提取） 以下过程在命令行中进行（win+R,输入cmd) 1.进入装有scrapy的磁盘中 2. scrapy shell 要爬取的网址 from scrapy.linkextractors import LinkExtractor link = LinkExtractor(allow=r'/book/1222_\d+\.html') link.extract_links(response) 3. link1=LinkExtractor(restrict_xpath
2022-02-23 16:59:16
805
原创 shell编程及自动化管理（随笔）
学习shell编程笔记 **变量** 自定义变量，整数运算，小数运算，环境变量，位置变量及预定义变量。 1）自定义变量： #name=moyun //中间无空格 #echo $name 重复定义变量： 第二次调用时，出来带上双引号也可用大括号{}，以便使变量叠加。 删除变量 #unset 变量名 交互定义变量 使用read 从键盘读入变量值 补充： “”：双引号表示弱引用 ‘’：单引号表示强引用，可以
2021-09-20 12:06:42
186
原创 mysql数据库随笔
学习记录 在一开始使用show databases;进入数据库，查看可用得数据库，如果没有，用create database 数据库名，使用use 数据库名，进入数据库。 1.创建表 mysql> create table 表名（ 列名 类型， 列名 类型， 列名 类型 ）default charset=utf8; #默认使用utf8，也可没有default charset=utf8,最后必须有分号； 补充：关于字符类型 int:整数类型 char : 最多可容纳255个字符 var
2021-09-20 09:58:31
177
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人