
python爬虫及系统配置
文章平均质量分 72
利用Python语言爬取数据,以及相关系统平台的搭建和配置。
xiabocs
这个作者很懒,什么都没留下…
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
ubuntu 18.04系统软件安装及使用
对于软件开发人员来说,ubuntu系统安装完成后还需要做哪些事情呢:1.安装Vim系统没有默认安装Vim,手动添加安装:sudo apt-get install vim2.删除Amazon的链接、删除libreofficesudo apt-get remove unity-webapps-commonubuntu下没有微软的microsoft office,相比之下,用wps比lib...原创 2019-09-04 20:00:48 · 1878 阅读 · 0 评论 -
JS逆向学习小笔记
1.js加密解析:window.navigator.userAgent在js中返回值就是浏览器的UserAgent。window.callPhantom || window._phantom ||window.navigator || window.navigator.webdriver如果使用了PhantomJS,window就会自动产生callPhantom或_phantom。2.execjs解析js报错:navigator is not defined/window is not defin原创 2022-05-12 10:28:08 · 802 阅读 · 0 评论 -
windows系统软件开发平台配置
1.mongodb安装及配置参考文档:https://blog.youkuaiyun.com/xuforeverlove/article/details/88344213原创 2020-06-08 09:00:25 · 731 阅读 · 0 评论 -
Idea及Pycharm插件推荐
Idea及Pycharm插件安装方式:File->Setting->Plugins1.Translation (翻译插件)2.Regex Tester (正则表达式测试)3.Json Parser(验证和格式化JSON字符)4.MongoQuery (数据库连接及可视化)原创 2021-04-30 17:27:11 · 329 阅读 · 1 评论 -
Python及Pycharm相关bug及其处理办法收集整理
新版本Pycharm更新后,每次运行脚本都会默认在Python Console选项中运行,而不是在Run选项中运行。导致程序运行完成后,脚本却不会自动停止。解决方法如下:点击菜单栏 Run --> Edit Configrations... --> 左上角工具栏小扳手(Edit Templates)--> 左侧列表会默认选定Templates/Python --> 右侧将“Run with Python Console”的勾选去掉...原创 2021-02-25 16:32:40 · 1880 阅读 · 0 评论 -
Win10系统下Scrapy爬虫框架安装及学习
主要是几个部件的顺序安装,不要出错:1.终端命令输入:pip install wheel2.终端命令输入:pip install lxml3.终端命令输入:pip install PyOpenssl4.终端命令输入:pip install Twisted5.终端命令输入:pip install Pywin326.终端命令输入:pip install scrapy7.终端...原创 2019-09-05 21:55:20 · 264 阅读 · 0 评论 -
python读取mongoDB数据并存入本地excel表格
from openpyxl import Workbookimport pymongo# 读取mongoDB数据库相应的表,每条数据取出数个字段存入一个dict,再将所有的dict存入一个listdef read_mongoDB(): # 连接mongoDB数据库,读取 db 库 table 表中的数据 client = pymongo.MongoClient('127...原创 2019-10-11 11:52:05 · 2644 阅读 · 1 评论