python
涉及python的方面
要写注释啊
这个作者很懒,什么都没留下…
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
如何在python中调用MATLAB代码(利用anaconda完美解决多python环境问题)
不知道有没有小伙伴遇到和我一样的问题,需要在python代码中使用MATLAB代码运行得到的结果,但是如果直接将MATLAB改写成python,工作量又被加大那么这时候就需要利用官方给出的方法,在python中调用MATLAB这里可参考官方给出的解决方法整理:根据自己安装的MATLAB版本去找到对应版本的python这里以matlab2017a版本为例,对应python3.5进入MATLAB的安装目录安装用于 Python 的 MATLAB 引擎 API(最好以管理员身份打开)D:原创 2021-06-25 17:32:33 · 5319 阅读 · 0 评论 -
关于python中三维数组的切片问题
要想弄清楚三维数组的切片问题,首先要明白三维数组的维度,定义一个三维数组,将其维度打印输出:import numpy as npb = np.array([ [[1, 2, 3, 4], [5, 6, 7, 8], [9, 10, 11, 12]], [[13, 14, 15, 16], [17, 18, 19, 20], [21, 22, 23, 24]], [[25, 26, 27, 28], [29, 30, 31, 32], [33, 34, 35, 36]],原创 2021-03-25 13:24:39 · 9289 阅读 · 8 评论 -
爬取数据时出现中文乱码问题
解决方法:response = request.get(url=url)print(response.text)此时发现直接打印response.text会出现大量的中文乱码,多做一步操作,改为:response = request.get(url=url)print(response.content.decode('utf-8'))成功解决乱码问题...原创 2021-03-18 19:22:52 · 640 阅读 · 0 评论 -
scrapy的数据持久化存储
方法一、基于终端命令parse方法中存在一个返回值,一般是字典或者列表,将该返回值存储到本地文件中,只需要执行指令:scrapy crawl xxx -o filePath该方法简洁高效,但是数据只能存储到指定类型的文件中,局限性叫强 Set a supported one (('json', 'jsonlines', 'jl', 'csv', 'xml', 'marshal', 'pickle')) after a colon at the end of the output URI (i.e. -原创 2021-03-18 18:13:14 · 358 阅读 · 0 评论 -
INFO: Overridden settings: {‘BOT_NAME‘: ‘proName‘, ‘NEWSPIDER_MODULE‘: ‘proName.spiders‘, ‘ROBOTS
在使用scrapy框架进行数据爬取时,并不能返回有效的response,此时将settings.py文件中的ROBOTSTXT_OBEY = True改为ROBOTSTXT_OBEY = False即可。同时对于终端打印出来的过多的日志内容,可以通过在配置文件中设置LOG_LEVEL = ‘True’,此时终端会省去过多的日志内容,而保留报错内容部分...原创 2021-03-18 11:47:16 · 1674 阅读 · 0 评论
分享