yw1688的专栏

下面我们进行网页数据采集的第四篇教程，这篇教程突然转向新浪微博，因为微博数据是我们进行数据挖掘的时候经常用到的，想要使用微博的数据，就得先申请一个app key ，app key其实就是一个应用的ID，有了这个ID新浪才允许你采集他们的数据。其实申请app key非常简单，只需要你动手填写几个表格即可，下面我们看看具体的申请流程和填写表格时的注意事项。先在百度搜索找到新浪微

httpwatch是ie浏览器下的抓包工具，也就是一个小插件，我们在上一篇文章中讲了如何启动httpwatch，今天我们将如何使用httpwatch进行抓包，明天的文章中，我们将会讲到如何使用这些抓到的包进行模拟登陆网页，所以你最好还是将两篇文章连起来一起看，否则可能会产生理解困难。打开IE，启动httpwatch打开一个网页，假如我要抓登陆网页的包，我

假如我们使用vba来采集新浪微博的数据，我们最好是使用新浪微博开放平台api进行采集，当然，想要使用api必须有app key，在上一篇文章【新浪微博app key申请教程】中我们介绍了app key的申请方法，如果你还没有key，就赶紧去申请一个，申请方法很简单，只需要几分钟你就能拥有自己的key，有了key以后，我们来看看如何使用app key来获取微博数据。我们知道vba采集

上次我们教大家如何使用httpwatch来进行抓包，其实这不重要，重要的是如何使用获得的数据包，你能读懂数据包吗？好吧，我们今天就是用python来示范一下如何使用数据包。先来设置两个url地址，第一个用于第一次访问，这样可以获得网站服务器发来的cookie，第二个网址是用于登陆的地址引入两个模块，cookielib和urllib2接着，我们安装一个cook

现在研究人员越来越多的数据都是来自互联网，我们需要使用网页数据采集的技术来获得数据，但是很多时候获得数据的时候需要向网站提交数据，所以，我们需要用到抓包工具，一个非常好用的抓包工具就是httpwatch，今天讲如何安装和启动httpwatch，明天讲如何使用HTTPwatch抓包，后天讲如何使用抓包获得的数据来模拟登陆网站，获得数据。先在下面的参考资料里下载httpwatch的最新

博客园在新浪微博上开了官方微博（http://t.sina.com.cn/cnblogs），为了方便一些信息的更新，比如IT新闻，我们使用了新浪微博开放平台接口。在这篇文章中，我们将和大家分享如何通过.NET(C#)调用新浪微博开放平台接口。使用新浪微博开放平台接口，需要先申请一帐号，申请方法：给 @微博开放平台 发送私信，或者给open_sina_mblog@vip.sina.c

摘要：OAUTH协议为用户资源的授权提供了一个安全的、开放而又简易的标准。与以往的授权方式不同之处是OAUTH的授权不会使第三方触及到用户的帐号信息（如用户名与密码），即第三方无需使用用户的用户名与密码就可以申请获得该用户资源的授权，因此OAUTH是安全的。同时，任何第三方都可以使用OAUTH认证服务，任何服务提供商都可以实现自身的OAUTH认证服务，因而OAUTH是开放的。业界提供了OAUTH的

xAuth简介使用xAuth认证方式，您仍然需要了解如何生成OAuth签名。为了方便桌面应用和移动应用，特别是那些缺乏浏览器支持的应用，xAuth认证为这类应用提供了一种使用用户名和密码来获取OAuth的 Access Token的方式。 采用xAuth认证的桌面应用和移动应用可以跳过oauth/request_token（获取Request Token）以及oauth/autho