Top_beyond的博客

# coding:utf-8 import re import requests import urllib2 import datetime from bs4 import BeautifulSoup from pymongo import MongoClient from multiprocessing import Pool #开启数据库 cn=MongoClient('localhost

#coding:utf-8 import requests from requests.exceptions import HTTPError, ConnectionError import threading from bs4 import BeautifulSoup import re import os,time import Queue class get_Url(): def

#coding:utf-8 import HTMLParser from selenium import webdriver import time,os,requests,xlwt,xlrd from lxml import etree from xlutils.copy import copy from bs4 import BeautifulSoup def url_do(path,jo

#coding:utf-8 import requests import re import urllib2 from pymongo import MongoClient from bs4 import BeautifulSoup #抓取51job相关职位信息 def get_url(): #连接mongo数据库 cn=MongoClient(host='127.0.0.1',

#coding:utf-8 from pymongo import MongoClient import requests,re from multiprocessing import Pool from bs4 import BeautifulSoup import pymongo from matplotlib import pyplot as plt #开启数据库 cn=MongoClien

1. Beautiful Soup的简介 简单来说，Beautiful Soup是python的一个库，最主要的功能是从网页抓取数据。官方解释如下： Beautiful Soup提供一些简单的、python式的函数用来处理导航、搜索、修改分析树等功能。它是一个工具箱，通过解析文档为用户提供需要抓取的数据，因为简单，所以不需要多少代码就可以写出一个完整的应用程序。 Beauti