hubing_hust的专栏

Python使用Pandas导入数据库sql

本文介绍了Python如何使用pandas导入xlsx格式的excel文件内容

本文介绍了Python使用pandas导入csv文件内容

Pandas是python的一个数据分析包，最初由AQR Capital Management于2008年4月开发，并于2009年底开源出来，目前由专注于Python数据包开发的PyData开发团队继续开发和维护，属于PyData项目的一部分。Pandas最初被作为金融数据分析工具而开发出来，因此，pandas为时间序列分析提供了很好的支持。Pandas的名称来自于面板数据（panel data）和python数据分析（data analysis）。

本文介绍了如何通过PyQt5的 Qt designer(QT设计师)，使用tab widget和stacked widget控件实现多页面切换功能

本文介绍了python在网络爬虫程序中如何使用多进程的方式进行数据爬取

对于抓不到全部html内容的情况，我们能采取什么应对措施呢，本文介绍一种可行的方法，就是通过Selenium webdriver来模拟浏览器运行的方式，这样就可以做到在浏览器中看到是什么样，抓取的源码就是什么样，也就是可见即可爬。在浏览器中打开这个页面时，首先会加载这个HTML内容，接着浏览器会发现其中引入了一个app.js文件，然后便会接着去请求这个文件，获取到该文件后，便会执行其中的JavaScript代码，而JavaScript则会改变HTML中的节点，向其中添加内容，最后得到完整的页面。

本文介绍了如何在python爬虫程序中使用多线程

WebDriver 以本地化方式驱动浏览器，就像用户在本地或使用 Selenium 服务器的远程机器上所做的那样，这标志着浏览器自动化的飞跃。Selenium WebDriver 指的是语言绑定和各个浏览器控制代码的实现。这通常被称为 WebDriver。Selenium WebDriver 是 W3C 推荐标准。WebDriver 被设计成一个简单和简洁的编程接口。WebDriver 是一个简洁的面向对象 API。它能有效地驱动浏览器。本文绝大部分内容，都可以从以下官方文档中找到。

本文介绍了python解析库beautifulsoup的安装

使用requests库，直接对图片的url进行请求，如果返回状态码为200（ok）的话，那么get方法返回的content二进制串即为图片的真实内容，我们只需将其写入文件即可。下面的示例代码中加入了路径的处理。

两者略有区别，urllib更偏底层一点, requests库是对urllib库的进一步封装，使用更方便。一般API返回的内容是以json组织的，自己关心什么内容的话，需要自己去解析json文本。由于requests库是第三方库，所以使用前需要先安装, pip install 即可。任何一个向 Web 服务器端发送请求来获得数据的应用程序都是“客户端”。可以用系统自带的urllib库，也可以用第三方库requests。

Twisted 是一个完整的事件驱动的网络框架，利用它既能使用也能开发完整的异步网络应用程序和协议。它现在还不是标准库的一部分，所以必须单独下载并安装它。使用pip install即可。它提供了大量的支持来建立完整的系统，包括网络协议、线程、安全性和身份验证、聊天/ IM、 DBM 及RDBMS 数据库集成、 Web/因特网、电子邮件、命令行参数、 GUI 集成工具包等。Twisted 提供了一个更加强大和灵活的框架，并且已经实现了很多协议。可以在。

有的同学在csdn上写了文章之后，看着自己文章的阅读量，少的可怜，不禁希望能把阅读量快速涨上去，不为别的，就是为了看着更舒服。除了通过正道提升文章质量，扩大影响力之外，也可以耍点小心机。因为通过实际操作可以发现，自己访问一篇文章，也可以使文章的阅读量上涨，不过，大概每30秒才会涨一次，在30秒内的多次重复访问不会提升阅读量。似乎可以自己写一个工具来模拟博客访问，只要获取到每篇文章的url后，就好办了，直接用get方法访问即可，需要注意的是，get()方法必须带上headers参数，否则拿不到数据。