- 博客(8)
- 收藏
- 关注
原创 关于Python那点事-Python 基础,Python Spider,Python Tensorflow
本人学习过Java,熟悉数据库基本管理,后期因为公司需求又自学了Python。从一开始听免费的公开课学习PythonSpider(Python爬虫),主要用于获取网页数据,从分析网页构建,到HTML页面解析,包括一些网页的点触验证码,滑动验证码,及普通验证码的识别及处理,FontCretor加密字体库,分析加密过程及如何解密。自我认为学的还是不错的,目前本人正在学习机器学习。在此本人将自...
2019-05-27 10:10:57
195
原创 Python自学
从一个小白到Python开发工程师的自我修养。https://fgk.pw/i/HdxZRAU2955点击此链接下载具体代码数据。
2019-05-21 10:30:37
655
原创 某汽车网站爬虫
主要使用到了ip池、模拟浏览器自动化检测、时间推送、数据库链接等技术具体代码:`# --coding:utf-8 --Filename:汽车之家论坛Author:GuanDatetime:2018/12/27from selenium import webdriverimport refrom _md5 import md5import happybaseimport date...
2018-12-28 11:28:43
424
原创 网络编程
花了点时间学习了以下关于套接字的脚本主要就是服务端和客户端的交互内容首先服务端脚本import sysimport socket#创建一个面向连接的服务端对象serversocket = socket.socket( socket.AF_INET,socket.SOCK_STREAM)#设置主机名、端口号host = socket.gethostname()port =...
2018-12-09 13:41:40
148
原创 爬虫防被封,直连数据库
今天花了一上午的时间,研究一下如何让爬虫避免IP封死。主要设计到PROXY和PROXYTYPE以下是代码:#-*- coding:utf-8 -*-#Filename:最终版搜狗数据#Author:Guan#Datetime:2018/12/8from selenium.webdriver.common.proxy import Proxyfrom selenium.webdri...
2018-12-08 15:04:37
337
原创 关于搜狗那点事
研究Webdriver\json\re\BeatifulSoupAPI的具体脚本使用#-*- coding:utf-8 -*-#Filename:完整版搜狗脚本#Author:Guan#Datetime:2018/12/6#The code is import packageimport requestsfrom bs4 import BeautifulSoupimport j...
2018-12-06 23:38:05
226
原创 360搜索引擎数据抓取
BeatifulSoup网页解析#-*- coding:utf-8 -*-#Filename:360搜索引擎#Author:Guan#Datetime:2018/11/30import requestsfrom bs4 import BeautifulSoupimport jsonimport timedef get_html(url): headers = { ...
2018-12-04 17:11:57
1973
原创 中CE——Database
#-*- coding:utf-8 -*-#Filename:中策大数据test#Author:Guan#Datetime:2018/11/24#导报import requestsfrom bs4 import BeautifulSoupimport jsonimport os#获取网页数据def get_html(url): headers = { ...
2018-12-04 17:10:12
215
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人