- 博客(3)
- 收藏
- 关注
RSS订阅原创 scrapy分布式学习笔记(1) nginx+scrapyd+腾讯云服务器远程登录
scrapy分布式学习笔记(1) nginx+scrapyd+腾讯云服务器远程登录最近在学如何实现scrapy分布式，今天刚搞明白nginx+scrapyd+腾讯云服务器实现远程登录，做下记录。所需组建安装scrapyd安装pip install scrapydscrapyd启动scrapydnginx安装yum install nginxnginx启动cd /usr/local/nginx/sbin/./nginx 端口开启由于scrapyd是6800端口，大部分网上教程
2021-12-22 00:35:28
1983
原创 docker+scrapy-splash+代理池的方法
docker+scrapy-splash+代理池的方法看了很多网站都没有把这种方法说透，自己摸索了一天，终于明白了如何在docker环境下对scrapy-splash搭代理池。根据scrapy官方文档对挂代理的描述 ，应该在本地创建这样一个文件夹my-proxy-profiles-dir，然后在该文件夹内放上你的代理文件，如果是代理池 那就多个文件。docker run -p 8050:8050 \ -v <my-proxy-profiles-dir>:/etc/splash/
2021-12-09 23:38:50
1209
原创 MYSQL学习笔记——数据库的基础使用
MYSQL学习笔记一mysql数据库常见操作账户登录创建数据库功能快捷键合理的创建标题，有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学公式新的甘特图功能，丰富你的文章UML 图表FLowchart流程图导出与导入导出导入mysql数据库常见操作账户登录-h 指定服务器的主机地址， -P 指定端口号 ， -u 指定当前shell用户
2021-09-14 22:48:47
457
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人