普通网友-优快云博客

原创【C#编程的最佳工具】

使用它，您可以在任何地方（Windows，Windows Store，Windows Phone，Mono和Xamarin）运行它时，创建、解析、查询和修改JSON，在XML和JSON之间进行转换。它不是Visual Studio平台的一部分，但它是您的C#开发工具包的一个很好的资源，例如在您构建代码项目时，除了解决方案之外。C#的一个流行的调试工具，.NET Fiddle的灵感来自于JSFiddle.net，旨在快速，简单的代码测试，而无需打开Visual Studio并创建一个新的项目。

2024-09-13 14:53:15 6165

原创 Python 爬虫实战之（美女福利趴）

1.分析要爬取的网址，发现页面分两级，第一级是多个图片集的入口，第二集是图片的入口。我们新建两个类，一个类是爬取所有图片集的url，一个类是根据得到的图片集的url爬取图片下载下来。这篇正则啥的就不搞了，其实都很简单的，对于html分析python有一些库是比较不错的，比如Beautiful Soup 有机会再学习学习！2.我们考虑用多线程去实现爬虫，为此我们引入了Queue模块，主线程爬取第一级得到多个图片集url放入到queue中，新建多个线程，从queue中取出数据，然后下载图片！

2024-09-11 17:51:51 782

原创【教你分分钟学会用python爬虫框架Scrapy爬取心目中的女神】

本博文将带领你从入门到精通爬虫框架Scrapy，最终具备爬取任何网页的数据的能力。本文以校花网为例进行爬取，校花网：http://www.xiaohuar.com/，让你体验爬取校花的成就感。Scrapy，Python开发的一个快速,高层次的屏幕抓取和web抓取框架，用于抓取web站点并从页面中提取结构化的数据。Scrapy用途广泛，可以用于数据挖掘、监测和。Scrapy吸引人的地方在于它是一个框架，任何人都可以根据需求方便的修改。

2024-09-10 14:19:17 2810

原创【Python】爬虫小白入门（三）BeautifulSoup库

上一篇演示了如何使用requests模块向网站发送http请求，获取到网页的HTML数据。这篇来演示如何使用BeautifulSoup模块来从HTML文本中提取我们想要的数据。update on 2016-12-28：之前忘记给BeautifulSoup的官网了，今天补上，顺便再补点BeautifulSoup的用法。update on 2017-08-16：很多网友留言说Unsplash网站改版了，很多内容是动态加载的。

2024-09-09 17:38:47 1591

原创【Python爬虫基础】详细教程，附代码

Python非常适合用来开发网页爬虫，理由如下：1、抓取网页本身的接口相比与其他静态编程语言，如java，c#，c++，python抓取网页文档的接口更简洁；相比其他动态脚本语言，如perl，shell，python的urllib包提供了较为完整的访问网页文档的API。（当然ruby也是很好的选择）此外，抓取网页有时候需要模拟浏览器的行为，很多网站对于生硬的爬虫抓取都是封杀的。

2024-09-07 15:06:12 1307

原创 pycharm使用教程-使用pycharm编写Python程序的详细步骤

编写好以后，在编写代码的窗口中单击右键，然后选择“Run (你的文件名)”，就可以运行程序了。现在，将鼠标放在创建的工程上，单击鼠标右键，然后依次选择“New>Python File".还不会使用pycharm编写Python程序的朋友们，不要错过小编带来的这篇文章哦。然后会弹出一个”New Python File"的窗口，输入名字后单击“OK”。在弹出的”New Project" 窗口中选则文件夹，如图，红色方框位置。选择后的如图所示，这里的文件夹随意，但最好命名全为英文，且在非C盘。

2024-09-06 17:44:40 1842

原创都说学【python】，那么python到底是什么呢？

很多人以为Python就是爬虫，爬虫就是Python。其实，虽然两者的发音有点接近，但是它们并不是同一样东西。爬虫，即网络爬虫（Web Crawler），可以理解为一只蜘蛛，互联网就比作一张大网，而爬虫便是在这张网上爬来爬去的蜘蛛。如果它遇到资源，那么它就会抓取下来。具体抓取什么，由你来决定。简单来说，

2024-09-05 11:43:16 2935

原创【学透这10个Python爬虫框架，轻松获取一切数据】

就像超市里有卖半成品的菜一样，Python爬虫工具也有半成品，就是Python爬虫框架。就是把一些常见的爬虫功能的代码先写好，然后留下一些借口。当我们在做不同的爬虫项目时，根据项目的实际情况，稍微变动一下，并按照需求调用这些接口，就可以完成一个爬虫项目了。是不是很心动？再也不用辛辛苦苦码代码了。下面，木木给大家分享一些高效好用的爬虫框架。

2024-09-04 11:48:30 1016 1

原创【python爬虫实战】天气数据爬取+数据可视化（附完整代码）

find方法比较使用的是可以查找指定内容的数据，使用attrs={}来定制条件，代码中我用了attrs={'class':'conMidtab'}或者使用class_='conMidtab'我们分析的是今天的情况，所以取第一个conMidtab，使用soup.find("div",class_="conMidtab")获取第一个conMidtab的内容。易错点：同时发现对于每个省第一个城市，它隐藏在tr的第二个td里，而除此之外的该省其他城市则在tr的第一个td里，因此使用一个if和else判断。

2024-09-03 16:22:33 3470

原创 Python爬虫超详细讲解（零基础入门，老年人都看得懂）

下载需要拼接路由，所以应用遍历，逐个拼接，逐个访问。HTML爬取的基础内容大致就是这么多，可以结合更多的python爬虫案例项目操作一下。比如：用python爬虫爬取各种视频、或者各种图片、或者各种小说等等，都是可以的哦。最后，python爬虫是一门可以应用十分广泛的技能，如果能学会，那以后需要什么数据，基本上也就是几行代码的事哦。

2024-09-02 09:20:27 415

原创 Python基础语法总结【一分钟让你学会】

Python中的关键字指的是python在发明之初，人家已经征用了一些默认的名字，这些名字是有特殊意义的，所以我们在声明变量，常量，函数和类的时候，不能使用这些缺省字符来给我们的对象起名。语句一般是使用关键字组成的命令，目的是告诉解释器做什么，语句可以有输入，也可以没有输出，比如56行就是一条语句，语句中可以包含表达式。4、python程序中定义变量，不需要显示的指定数据类型名称，因为python是一种动态语言，它会根据值的类型来推断变量的类型。8、注释在程序的编写过程中很重要，常用来说明程序语句的功能。

2024-08-31 17:19:41 875

原创新手必看！python下载与安装教程（超详细）附安装，包拿走不谢

https://pypi.mirrors.ustc.edu.cn/simple/ 就是从中国科技大学(ustc)的服务器上下载flask(基于python的第三方web框架)注意：如果在安装过程中，已经勾选了 Add Python 3.7 to PATH选项，并且在cmd 命令模式下输入python指令不报错，就不需要再手动的配置Python.可能是因为在安装python的过程中未勾选 Add Python 3.7 to PATH 选项，需要手动的配置pip的环境变量。

2024-08-30 17:34:14 1938

GT001007的博客