- 博客(5)
- 收藏
- 关注
RSS订阅原创 centos虚拟机安装MySQL数据库的报错
关于我想把爬取的数据保存在数据库中，而虚拟机安装数据库出现种种报错。前几天我用scrapy在网站上爬取了一些数据，本打算在centos虚拟机中安装个mysql数据库，可是种种报错，今天正好来了兴趣便开始网上搜各种资料以便于解决问题。一开始我是用的centos的yum源下载mariadb,可是就是没办法打开。后来就打算在网上下载mysql用secureCRT的rz直接传到了虚拟机上，然后经过解压到虚拟机里，就这样错误开始出现。一.mysql启动时报错，忘了报的啥错，其中有一个指向我的localhost.
2022-02-26 15:54:42
1847
原创 crawlspider案例
python 爬虫中的crawlspider案例（以下载读书网数据为列）利用scrapy中带的管道存储数据一.打开``命令行注意：运行scrapy的项目时需要在venv的目录下创建（我自己尝试的是，在其他地方无法调用一些库，个人所测是）scrapy startproject scrapy_dushuwang_3 #创建项目cd \scrapy_dushuwang_3\scrapy_dushuwang_3\spiders #跳转到spiders路径scrapy genspider -
2022-02-24 20:45:58
547
原创 scrapy中的链接提取
关于scrapy的一小部分（链接提取）以下过程在命令行中进行（win+R,输入cmd)1.进入装有scrapy的磁盘中2.scrapy shell 要爬取的网址from scrapy.linkextractors import LinkExtractorlink = LinkExtractor(allow=r'/book/1222_\d+\.html')link.extract_links(response)3.link1=LinkExtractor(restrict_xpath
2022-02-23 16:59:16
773
原创 shell编程及自动化管理（随笔）
学习shell编程笔记 **变量**自定义变量，整数运算，小数运算，环境变量，位置变量及预定义变量。1）自定义变量：#name=moyun //中间无空格#echo $name重复定义变量：第二次调用时，出来带上双引号也可用大括号{}，以便使变量叠加。删除变量#unset 变量名交互定义变量使用read 从键盘读入变量值补充：“”：双引号表示弱引用‘’：单引号表示强引用，可以
2021-09-20 12:06:42
155
原创 mysql数据库随笔
学习记录在一开始使用show databases;进入数据库，查看可用得数据库，如果没有，用create database 数据库名，使用use 数据库名，进入数据库。1.创建表mysql> create table 表名（列名 类型，列名 类型，列名 类型）default charset=utf8;#默认使用utf8，也可没有default charset=utf8,最后必须有分号；补充：关于字符类型int:整数类型char : 最多可容纳255个字符var
2021-09-20 09:58:31
154
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人