- 博客(9)
- 收藏
- 关注
原创 django操作已有数据库
近期需要用django快速搭建一个后台管理,数据库已经存在。大家都知道django是通过models模型类来产生映射对应关系的。如果参照数据库去自己写models,未免太麻烦了。这里只需要几条命令就能实现,特此记录一下。 第一步: python manage.py inspectdb 第二步: python manage.py inspectdb > models.py # 这里的mode...
2019-07-31 15:22:54
918
原创 出现cannot import name 'main'的错误信息
ImportError: cannot import name ‘main’ 最近在使用scrapy框架,但是在运行scrapy的时候,出现openSSL的问题,在网上查看答案,是因为版本不兼容,需要卸载重新安装。但是在执行sudo pip3 uninstall pyopenssl 时,又出现了ImportError: cannot import name 'main’的问题,详情如下: wu@u...
2019-06-29 17:56:19
1614
原创 多线程----使用线程池爬取二手房信息
最开始采用单线程,但是总共要爬取100页共计6000多个html数据,效率特别低,临时学习了一下线程池,非常好用 直接上代码: import urllib.request from lxml import etree import threadpool import ssl ssl._create_default_https_context = ssl._create_unverified...
2019-05-12 02:50:25
342
原创 系统机器学习(一) ----sklearn概念和API
skearn接口包含:<分类,回归,聚类> ++ <特征工程> ++ <模型选择,调优> 等 一.特征工程 1.特征工程包含(特征抽取,特征预处理,特征降维) 1️⃣.特征抽取(我的理解:将特征(文本或者图像)提取为机器能看懂的数字特征) A.字典特征抽取(特征离散化) ...
2019-05-10 22:38:00
383
原创 AttributeError: 'str' object has no attribute 'decode'
执行数据库迁移时报错信息: … cursor.execute(‘SELECT @@SQL_AUTO_IS_NULL’) File “/home/wuchunhui/.virtualenvs/sss/lib/python3.5/site-packages/django/db/backends/utils.py”, line 103, in execute sql = self.db.ops.last...
2019-04-09 11:07:59
2107
原创 You are using pip version 9.0.1, however version 19.0.2 is available. You should consider upgrading
在windows下使用pip安装时出现提示:You are using pip version 9.0.1, however version 19.0.2 is available. You should consider upgrading via the ‘python -m pip install --upgrade pip’ command. 说明pip版本太低,这时需要使用pytho...
2019-02-16 13:37:59
21703
4
原创 对redis持久化理解
我们经常会遇到redis持久化的问题,为了自己便于理解,分享一点自己看书的心得!!! redis持久化的几种方式 1、前言 Redis是一种高级key-value数据库。它跟memcached类似,不过数据可以持久化,而且支持的数据类型很丰富。有字符串,链表,集 合和有序集合。支持在服务器端计算集合的并,交和补集(difference)等,还支持多种排序功能。所以Redis也可以被看成是一个数据结...
2019-02-15 21:25:05
222
原创 简单爬虫爬取豆瓣电影信息
简单爬虫程序爬取豆瓣电影信息 1.整体思路,写注释 2.根据注释实现具体步骤,建议在每一步功能都定义成类方法,然后直接在run方法中调用,这样代码就比较规整,看思路只需要看run里面的内容就OK了 3.完整代码 4.得到数据后就可以对需要的数据进行处理了 ...
2019-02-13 13:35:46
1194
转载 win10如何更改pip下载源为国内源
@win10如何更改pip下载源为国内源 最近看到一个实用的方法,点击链接即可: 地址https://jingyan.baidu.com/article/3d69c55127775af0cf02d79e.html 欢迎使用Markdown编辑器 你好! 这是你第一次使用 Markdown编辑器 所展示的欢迎页。如果你想学习如何使用Markdown编辑器, 可以仔细阅读这篇文章,了解一下Markdo...
2019-02-11 16:04:38
2638
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人