<?xml version="1.0" encoding="utf-8" ?><rss version="2.0"><channel><title><![CDATA[summer6364的博客]]></title><description><![CDATA[]]></description><link>https://blog.youkuaiyun.com/summer6364</link><language>zh-cn</language><generator>https://blog.youkuaiyun.com/</generator><copyright><![CDATA[Copyright &copy; summer6364]]></copyright><item><title><![CDATA[爬虫踩过的坑！！！]]></title><link>https://blog.youkuaiyun.com/summer6364/article/details/76861415</link><guid>https://blog.youkuaiyun.com/summer6364/article/details/76861415</guid><author>summer6364</author><pubDate>Mon, 07 Aug 2017 21:05:39 +0800</pubDate><description><![CDATA[case：爬取10万数量级的英文新闻。目标站点：卫报（是英国的全国性综合内容日报）看我细数那些坑：
xpath路径容易搞错。google网页自带的copy.xpath得到的路径一不留神就会出错，而且他给的路径有时灰常复杂，这就需要机智的你找到规律，略微修改，利用ctrl+f ,检查修改的路径能否如愿以偿。
scrapy.Request 前面常常会丢掉yield，然后就会发生callback函数打死都]]></description><category></category></item><item><title><![CDATA[特征工程笔记（1）]]></title><link>https://blog.youkuaiyun.com/summer6364/article/details/76401597</link><guid>https://blog.youkuaiyun.com/summer6364/article/details/76401597</guid><author>summer6364</author><pubDate>Sun, 30 Jul 2017 19:17:24 +0800</pubDate><description><![CDATA[标准化数值变量数据集中的数值变量通常在不同的尺度上，如高度，重量等。建议将这些变量标准化以使它们达到相同的规模。标准化的一个很好的例子是身体质量指数（BMI），它是用于通过将体重测量与身高标准化来确定人是体重不足或超重的一种措施，以使不同人的BMI相当。未标准化变量可能会导致算法对于更高规模的变量产生不适当的应用。对于许多机器学习算法（如SVM，神经网络，K-means等）来说，这一点尤为正确。标准]]></description><category></category></item><item><title><![CDATA[爬虫中的＇伪装者＇－－header]]></title><link>https://blog.youkuaiyun.com/summer6364/article/details/75675043</link><guid>https://blog.youkuaiyun.com/summer6364/article/details/75675043</guid><author>summer6364</author><pubDate>Fri, 21 Jul 2017 21:26:31 +0800</pubDate><description><![CDATA[header中有哪些信息User_Agent: 
用户代理．是一种向访问网站提供你所使用的浏览器类型，操作系统及版本，cpu类型，浏览器渲染引擎，浏览器语言，浏览器插件等信息的标识．UA字符串在每次浏览器HTTP请求时发送到服务器．Referer: 
HTTP referer 是header的一部分，当浏览器向web服务器发送请求的时候，一般会带上Referer，告诉服务器我是从哪个页面链接过来的，]]></description><category></category></item><item><title><![CDATA[python编码问题]]></title><link>https://blog.youkuaiyun.com/summer6364/article/details/75347135</link><guid>https://blog.youkuaiyun.com/summer6364/article/details/75347135</guid><author>summer6364</author><pubDate>Wed, 19 Jul 2017 10:44:57 +0800</pubDate><description><![CDATA[python requests 的content和text区别



html = requests.get('xxxxxx',cookies=cookies).text



html = requests.get('xxxxxx',cookies=cookies).content

那r.text与r.content有什么区别呢？

分析requests的源代码发现，r.text返回的是Uni]]></description><category></category></item><item><title><![CDATA[python 学习笔记]]></title><link>https://blog.youkuaiyun.com/summer6364/article/details/75151198</link><guid>https://blog.youkuaiyun.com/summer6364/article/details/75151198</guid><author>summer6364</author><pubDate>Sat, 15 Jul 2017 12:04:09 +0800</pubDate><description><![CDATA[目录
Python 基础数据类型及基本操作
数据容器
列表表达式和字典表达式
判断语句
循环语句
定义函数
文件读写
正则表达式
对类（class）的理解
python 基础数据结构、
字符串
数值型
布尔型
基本操作
变量
公式计算
正则表达式正则表达式在线验证工具是：[http://regexr.com/]2个函数help,dirhelp(str)#查看关于字符串的操作方法dir(list)#查]]></description><category></category></item></channel></rss>