Python
关注
分享
扫一扫
icefireicefire
这个作者很懒，什么都没留下…
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
python中实现不换行、不刷屏打印，类似Ajax中的计数效果
for m in range(31): m += 1 print('\b' * 20 + ("正在采集第" +str(m) + "条").ljust(20), end='')print('\b' * 20, end='')原创 2020-09-24 09:03:23 · 441 阅读 · 0 评论 -
Python自动获取百度翻译
import http.clientimport hashlibimport urllib.parseimport randomimport jsondef baiduTranslate(q, fromLang="en", toLang="zh"): appid = '' #你的appid(这里是必填的, 从百度 开发者信息一览获取) secretKey = '' ...原创 2019-11-22 13:09:24 · 394 阅读 · 0 评论 -
python操作mysql函数
import pymysql# host = "localhost"# username = "root"# psw = "123456"# database = "test"def cmdsql(sql): """更新数据库操作""" # 打开数据库连接 db = pymysql.connect(host, username, psw, database...原创 2019-11-20 17:19:17 · 569 阅读 · 0 评论 -
利用python采集相关网站信息（函数化）
from bs4 import BeautifulSoupfrom MysqlTest import *import requestsimport timeimport datetime#是否打印相关信息isprint = 0def caiji_byid(cid, url, soupselect, dateselect, titleselect, urlselect, date...原创 2019-11-17 22:06:16 · 222 阅读 · 0 评论 -
Python爬取相关网站数据(已经函数化处理）
from bs4 import BeautifulSoupfrom MysqlTest import *import requestsimport timeimport datetime#是否打印相关信息isprint = 0def caiji_byid(cid, url, soupselect, dateselect, titleselect, urlselect, urlb...原创 2019-11-10 22:40:53 · 307 阅读 · 0 评论 -
python操作mysql注意事项
在默认情况下cursor方法返回的是BaseCursor类型对象，BaseCursor类型对象在执行查询后每条记录的结果以列表(list)表示。如果要返回字典(dict)表示的记录，就要设置cursorclass参数为MySQLdb.cursors.DictCursor类。例如： db = pymysql.connect("localhost", "root", "123456", "test...原创 2019-11-06 22:37:49 · 192 阅读 · 0 评论 -
采集指定网址数据函数
from bs4 import BeautifulSoupfrom mysql import *import requestsimport timeimport datetimedef caiji_byid(cid, url, soupselect, dateselect, titleselect, urlselect, urlbase): """通过id采集相应数据并存入...原创 2019-11-06 15:08:03 · 196 阅读 · 0 评论 -
python操作mysql数据库函数
import pymysqldef cmdsql(sql): """更新数据库操作""" # 打开数据库连接 db = pymysql.connect("localhost", "root", "123456", "test", charset='utf8') # 使用cursor()方法获取操作游标 cursor = db.cursor() ...原创 2019-11-05 22:26:53 · 556 阅读 · 0 评论 -
python爬取中国欧盟商会最新新闻
from bs4 import BeautifulSoupimport requestsimport timet0 = time.perf_counter()url = "https://www.europeanchamber.com.cn/en/press-releases"headers = { 'User-Agent': 'Mozilla/5.0 (Macintosh;...原创 2019-11-05 16:53:03 · 150 阅读 · 0 评论 -
python爬取IMF网站最新发布的内容
下面是获取最新新闻列表及链接from bs4 import BeautifulSoupimport requestsimport timet0 = time.perf_counter()url = "https://www.imf.org/external/what/whatsnewenglish/what.aspx?Page=1"headers = { 'User-A...原创 2019-10-28 13:07:05 · 510 阅读 · 0 评论 -
python爬虫分析链家最近一段时期房屋成交均价
from bs4 import BeautifulSoupimport requestsimport timet0 = time.perf_counter()url = "https://bj.lianjia.com/chengjiao/pg2/"headers = { 'User-Agent': 'Mozilla/5.0 (Macintosh; Intel Mac OS X...原创 2019-10-27 23:13:40 · 471 阅读 · 0 评论 -
Python爬取网页中的链接标题
from bs4 import BeautifulSoupimport requestsimport timet0 = time.perf_counter()url = "https://www.shiyanlou.com/questions/102676/?utm_source=baidu&utm_medium=cpc&utm_campaign=python&...原创 2019-10-27 15:41:03 · 833 阅读 · 0 评论 -
python爬取百度自动翻译
from urllib import request, parseimport jsonif __name__ == '__main__': baseurl = "https://fanyi.baidu.com/sug" word = input("请输入您想输入的单词:") # 我们需要传送过去的数据 datas = { 'kw': wor...原创 2019-10-27 15:38:51 · 604 阅读 · 0 评论