dhf9963-优快云博客

转载测试程序运行的时间

---恢复内容开始---运行一个小的程序要多久的时间呢，这就要用一个小小的程序运行的结果试验一下：下面是一个小的代码：#首先要引用时间import timet = time.clock()result = ("select * from 表A")e = time.clock()#这打印的是运行这个命令用的是多长时间print(t-e)print...

2017-09-06 23:07:00 176

转载 API接口简单的写法

#接口#引用分页模块from django.core.paginator import Paginator#引用json格式import jsondef jiekou(request): #请求方式为get if request.method=='GET': #新建列表遍历存入数据库数据 new_list=[] all=Car.obj...

2017-08-21 11:16:00 1200

转载数据库数据进行量化算法入库

import mysql.connectordef Main(): #云量数据库 db = mysql.connector.connect(user='check_user',password='654321123456',port=3306,host='123.56.72.57',db='test_check') # 连接mysql # 获取游标 cursor...

2017-08-20 21:25:00 278

转载正则爬取二手房数据

以下代码是二手房的数据，代码仅供参考，很简单，超级简单#encoding:utf8import requestsimport re调用网址def spider(url): html = requests.get(url).content.decode('utf8')数据的正则，如果你感觉你用正则匹配不出来，那么你就分开匹配，然后在把所要的正则拼合在一起。我就是这么搞得。 ti...

2017-07-03 16:34:00 223

转载接口加密和破解

1、使用base64模块来加密破解。Base64编码，64指A-Z、a-z、0-9、+和/这64个字符，还有“=”号不属于编码字符，而是填充字符。这个编码的原理很简单，“破解”也很容易优点：方法简单缺点：不保险，别人拿到密文可以自己解密出明文编码原理：将3个字节转换成4个字节((3 X 8)=24=(4X6))，先读入3个字节，每读一个字节，左移8位，再右移四次，每次6位...

2017-06-22 19:39:00 376

转载 scrapy爬取斗图表情

用scrapy爬取斗图表情，其实呀，我是运用别人的博客写的，里面的东西改了改就好了，推存链接“ http://www.cnblogs.com/jiaoyu121/p/6992587.html ”首先建立项目：scrapy startproject doutu在scrapy框架里先写自己要爬取的是什么，在item里面写。import scrapyclass DoutuItem(...

2017-06-21 19:55:00 234

转载多线程爬取斗图表情包

和朋友在QQ上聊天感觉呀没有激情，突然，突发奇想，我写个小的爬虫，把表情包爬取下来随便挑，斗到他们吐血。　　　　　　　　　　　　　　　　　　　　　　下面是爬取斗图的代码，代码可供参考#encoding:utf8#模块import reimport requestsfrom lxml import etreeimport osimport randomimport threadi...

2017-06-21 16:11:00 210

转载多线程，多进程使用过程中的问题和解决方案

次作，只是摘录，组合而成，只能参考多线程：一个进程中可以有多条执行路径同时执行，一个线程就是进程中的一条执行路径。在早期的操作系统中并没有线程的概念，进程是能拥有资源和独立运行的最小单位，也是程序执行的最小单位。它相当于一个进程里只有一个线程，进程本身就是线程。所以线程有时被称为轻量级进程(Lightweight Process，LWP）。后来，随着计算机的发展，对多...

2017-06-20 19:21:00 600

转载 Python的hashlib。MD5加密，与运用状况

MD5加密，其实也是一种算法：想要学习呢我推荐“廖雪峰的官方网站学习MD5加密”网址“http://www.liaoxuefeng.com/wiki/001374738125095c955c1e6d8bb493182103fac9270762a000/0013868328251266d86585fc9514536a638f06b41908d44000”我看了大佬的运用，我搬到我的...

2017-06-19 11:32:00 159

转载操作数据库增加字段，判断数值增减，对号如坐

首先呢，把数据导入到MySQL数据库进行查看，在加一个字段tbody。下面我给大家说一下下面代码的意思：首先python链接MySQL数据库import mysql.connector自己数据库的名字、端口号、密码、ipdb = mysql.connector.connect(user='名',password='密码',host='127.0.0.1',port=端口,db='数据库名...

2017-06-13 14:54:00 263

转载 Linux服务器安装svn

　　安装snv命令： yum -y install subversion查看是否安装成功： yum list installed建立版本库目录，建立好的版本库目录与安装目录不在同级目录下，如果没有这个路径，那么你就去创建它： mkdir –p /opt/svndata/repos建立svn版本库，和上边的的库对应，如果没有这个路径，那么你就...

2017-06-07 21:04:00 112

转载设置超时时间（项目案例仅供参考）

#设置超时时间爬取网页速度相对要快些#encoding:utf8from lxml import etree#xpathimport re#正则import time#时间import requests#传值from selenium import webdriver#通用阅览器from selenium.webdriver.support.ui import WebDriverWait...

2017-05-24 08:51:00 313

转载 selenlum笔记，（定位方式，搜索，cookie）

driver.get_cookies（）获得cookie信息add_cookie(cookie_dict) 向cookie添加会话信息delete_cookie(name) 删除特定(部分)的cookiedelete_all_cookies() 删除所有cookiedriver.quit()退出关闭所有程序及窗口driver.close()关闭当前窗口driver.get(...

2017-05-21 20:38:00 199

转载爬取北京房子信息与图片保存文件夹

#encoding:utf8import requestsfrom lxml import etreeimport reimport hashlib#random定义任意随机数import randomimport timeyuan = requests.get('http://esf.fang.com/').textdemo = etree.HTML(yuan).xpath('//*/...

2017-05-15 16:52:00 101

转载 request下载进度显示，多线程爬取麦子学院视频

#encoding:utf8import _threadimport timeimport requestsfrom lxml import etreeimport reimport sysfrom contextlib import closing# 为线程定义一个函数class ProgressBar(object): def __init__(self, title, ...

2017-05-15 16:42:00 149

转载用接口爬取今日头条图片

#encoding:utf8import requestsimport jsonimport redemo = requests.get('http://www.toutiao.com/api/pc/feed/?category=gallery_detail&utm_source=toutiao&max_behot_time=0&as=A1E5F9D180C247...

2017-05-09 19:03:00 365