- 博客(5)
- 收藏
- 关注
原创 mongodb数据库常用命令操作
终端命令1:mongo 启动MongoDB shell客户端的命令2: mongod 启动MongoDB数据库服务的命令,三种启动方式(指定数据库目录–dbpath=/xxxxx/xxxxx,以配置文件方式启动-f /etc/mongodb.cnf,以守护进程方式启动–logpath=/data/db/mongodb.log --fork)数据库基本命令和用户类命令1:关闭守护进...
2018-12-16 20:27:25
218
原创 转换请求头参数的python脚本,自动添加引号
在爬虫的时候好多朋友都在纠结怎么快速请求头加引号和逗号隔开,每次都要一个一个加引号,很费时间,在这里给大家分享一个自己写的脚本,把请求头复制进去运行,再复制出来即可用,代码如下headers= """Accept: text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,image/apng,*/*;q=0.8Acce...
2018-12-13 12:47:19
2007
3
原创 python2与pyhton3爬取百度贴吧
使用python3和python2爬取百度贴吧数据保存到本地,仅作为python2和python3在urllib2模块使用上的区别的记录python2版本#coding:utf-8# import urllib.requestimport urllib2# import urllib.parseimport urllibclass BaiduSpider(object): ...
2018-12-13 12:31:28
170
原创 在docker中安装Elasticsearch
1.安装dockersudo apt install apt-transport-https ca-certificates software-properties-common curl2.添加 GPG 密钥,并添加 Docker-ce 软件源,这里还是以中国科技大学的 Docker-ce 源为例curl -fsSL https://mirrors.ustc.edu.cn/docke...
2018-12-13 12:19:48
390
原创 带你看懂python2与python3在字符编码方面的区别
从python2更新到python3,相信每个人都遇到过爬取网页编码错乱,编码转码混淆等问题,在这里,笔者详细说明一下python2与python3之间的字符编码问题,也是个人在使用过程中的一些总结。1. 什么是字符编码: 计算机里所有数据,本质都是二进制表示。先带大家来看下什么是编码这里用的是python3环境,python3环境默认字符串的字符类型是str,默认编码类型是Unico...
2018-12-10 21:33:46
342
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人