<?xml version="1.0" encoding="utf-8" ?><rss version="2.0"><channel><title><![CDATA[dbldwang的博客]]></title><description><![CDATA[]]></description><link>https://blog.youkuaiyun.com/dbldwang</link><language>zh-cn</language><generator>https://blog.youkuaiyun.com/</generator><copyright><![CDATA[Copyright &copy; dbldwang]]></copyright><item><title><![CDATA[Linux-centos7安装mysql5.7]]></title><link>https://blog.youkuaiyun.com/dbldwang/article/details/123822006</link><guid>https://blog.youkuaiyun.com/dbldwang/article/details/123822006</guid><author>dbldwang</author><pubDate>Tue, 29 Mar 2022 15:53:08 +0800</pubDate><description><![CDATA[Linux-centos7安装mysql5.7
1.下载、安装mysql.rpm安装包
首先需要安装wget组件：
yum -y install wget

下载mysql.rpm安装包：
wget https://dev.mysql.com/get/mysql80-community-release-el7-5.noarch.rpm

安装mysql.rpm安装包：
rpm -Uvh mysql80-community-release-el7-5.noarch.rpm

2.配置mysql安装服务
yum]]></description><category></category></item><item><title><![CDATA[数据采集——爬虫篇(三)：selenium+Chrome实现自动化测试---爬取数据]]></title><link>https://blog.youkuaiyun.com/dbldwang/article/details/106683441</link><guid>https://blog.youkuaiyun.com/dbldwang/article/details/106683441</guid><author>dbldwang</author><pubDate>Mon, 22 Feb 2021 10:45:32 +0800</pubDate><description><![CDATA[数据采集——爬虫篇(三)：selenium+Chrome实现自动化测试—爬取数据
.
1.selenium环境安装部署
首先安装Chrome谷歌浏览器
查看设置系统版本：

然后下载Chrome对应的webdriver
地址：http://npm.taobao.org/mirrors/chromedriver/
选择对应版本，我的版本是83.0.4103.97：
注：基本没有完全对应的版本，选择与当前版本最接近的即可

根据操作系统不同，选择对应驱动（剪头选择为Windows）：

下载解压并复制到chro]]></description><category></category></item><item><title><![CDATA[数据采集——爬虫篇(二)：美食信息采集]]></title><link>https://blog.youkuaiyun.com/dbldwang/article/details/106638364</link><guid>https://blog.youkuaiyun.com/dbldwang/article/details/106638364</guid><author>dbldwang</author><pubDate>Tue, 09 Jun 2020 16:15:52 +0800</pubDate><description><![CDATA[数据采集——爬虫篇(二)：美食信息采集
.
1.分析美食网页的url参数构成
美食，地址：北京，搜索关键词：火锅
url：
https://bj.*******.com/s/%E7%81%AB%E9%94%85/
url会有自动编码中文功能所以  火锅=%E7%81%AB%E9%94%85
通过关键词城市的url构造，解析当前url中的bj=北京，/s/后面跟搜索关键词
这样我们就可以了解到当前url的构造。]]></description><category></category></item><item><title><![CDATA[爬虫进阶——视频抓取(视频加密分割案例)中国职业培训在线网]]></title><link>https://blog.youkuaiyun.com/dbldwang/article/details/106568733</link><guid>https://blog.youkuaiyun.com/dbldwang/article/details/106568733</guid><author>dbldwang</author><pubDate>Fri, 05 Jun 2020 14:15:31 +0800</pubDate><description><![CDATA[爬虫进阶——视频抓取(视频加密分割案例)中国职业培训在线网
.
1.分析网页视频存储形式以及加密格式
一般我们在进行视频采集视频多为：https:www.baidu.com/1.mp4  指向一个视频文件，然而在大多数网站中，现在主流的视频加密格式多为分割为几百个小片段，伴随不断播放而不断加载新的片段，针对中国职业培训在线视频网的视频举例：
http://www.ataclass.cn/player/index/index?guid=0FD6828C-6B69-4E87-92BA-C9C065EF124B&]]></description><category></category></item><item><title><![CDATA[数据采集——爬虫篇(一)：豆瓣电影TOP250详细信息采集]]></title><link>https://blog.youkuaiyun.com/dbldwang/article/details/106563152</link><guid>https://blog.youkuaiyun.com/dbldwang/article/details/106563152</guid><author>dbldwang</author><pubDate>Fri, 05 Jun 2020 10:26:08 +0800</pubDate><description><![CDATA[数据采集——爬虫篇(一)：豆瓣电影TOP250详细信息采集
.
1.分析豆瓣url换页变化
打开
https://movie.douban.com/top250?start=0&amp;filter=
来到豆瓣主页
此处可以观察到电影是在第1个序号开始的，暂时记住url，观察后续变化

切换第二页，发现url变化：
https://movie.douban.com/top250?start=25&amp;filter=
第二页如下：

**url第一页：https://movie.douban.com/to]]></description><category></category></item><item><title><![CDATA[大数据组件Logstash日志采集和filebeat采集日志与数据库交互（1+x证书方向）]]></title><link>https://blog.youkuaiyun.com/dbldwang/article/details/106543671</link><guid>https://blog.youkuaiyun.com/dbldwang/article/details/106543671</guid><author>dbldwang</author><pubDate>Thu, 04 Jun 2020 16:25:05 +0800</pubDate><description><![CDATA[大数据组件Logstash日志采集和filebeat采集日志与数据库交互（1+x证书方向）
.
一、logstash的应用安装与部署
.
1.logstash的应用
  logstash作为日志采集，转换工具，是ETL的一部分，Logstash 的作用就
是一个数据收集器，将各种格式各种渠道的数据通过它收集解析之后格式化输
出到Elasticsearch ，最后再由Kibana 提供的比较友好的Web 界面进行
汇总、分析、搜索。

.
2.logstash的安装
首先准备logstash的压缩包：logs]]></description><category></category></item><item><title><![CDATA[Django+python服务器部署——(1)环境部署]]></title><link>https://blog.youkuaiyun.com/dbldwang/article/details/105156110</link><guid>https://blog.youkuaiyun.com/dbldwang/article/details/105156110</guid><author>dbldwang</author><pubDate>Sat, 28 Mar 2020 10:33:30 +0800</pubDate><description><![CDATA[**
Django+python服务器部署——(1)环境部署
**
需要准备环境:python3.6、vultr(或者其他服务器)、xshell
第一步：python安装必备环境Django库
Xshell链接远程主机：

点击连接之后：弹窗输入访问用户及密码，一般为root用户


成功连接到目标服务器：
[root@vultr ~]# 

安装python以及需要环境(此为安装完python3...]]></description><category></category></item></channel></rss>