
python
文章平均质量分 58
songhao8080
这个作者很懒,什么都没留下…
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
python读取超大文件 Python读取大文件(GB)
最近处理文本文档时(文件约2GB大小),出现memoryError错误和文件读取太慢的问题,后来找到了两种比较快Large File Reading 的方法,本文将介绍这两种读取方法。 我们谈到“文本处理”时,我们通常是指处理的内容。Python 将文本文件的内容读入可以操作的字符串变量非常容易。文件对象提供了三个“读”方法...原创 2018-07-27 14:45:50 · 21576 阅读 · 0 评论 -
python httpx 模块教程 比requests 更快
快速开始 首先,首先导入 HTTPX: >>> import httpx 现在,让我们尝试获取一个网页。 >>> r = httpx.get('https://httpbin.org/get') >>> r <Response [200 OK]> 同样,发出HTTP POST请求: >>> r = http...原创 2020-01-23 10:22:46 · 9622 阅读 · 3 评论 -
celery 任务队列取消预取机制 加入 -O fair
celery 任务队列预取机制 我们启动celery基本命令为: celery -A mytask worker --loglevel=info 当以此命令启动celery后,celery默认情况下执行任务会有个预取机制(prefetching),预取是什么呢,如下一张图: 我们假设有两个worker,但当任务量较多的时候,celery有个任务队列,每个wroker执行完了,就从这个队列中取任...转载 2019-08-27 11:16:43 · 1639 阅读 · 1 评论