- 博客(57)
- 资源 (5)
- 收藏
- 关注
原创 tmux: invalid LC_ALL, LC_CTYPE or LANG 问题解决
出现了以下问题:~ >>> tmux -h tmux: invalid LC_ALL, LC_CTYPE or LANG查看locale:~ >>> locale
2021-02-20 16:28:23
1473
翻译 asyncio 系列六、asyncio的网络原语
官网连接:https://docs.python.org/zh-cn/3.7/library/asyncio-stream.html流是用于处理网络连接的高级 async/await-ready 原语。流允许发送和接收数据,而不需要使用回调或低级协议和传输。下面官网例子,是一个使用 asyncio streams 编写的 TCP echo 客户端示例:import asyncio...
2019-05-24 22:42:05
1936
翻译 asyncio 系列五、asyncio的事件循环
官网连接:https://docs.python.org/zh-cn/3.7/library/asyncio-eventloop.html#asyncio.loop.run_in_executor事件循环是每个 asyncio 应用的核心。 事件循环会运行异步任务和回调,执行网络 IO 操作,以及运行子进程。里面封装的方法用于上层函数调用。本节所针对的主要是低层级代码、库和框架的编写者,...
2019-05-24 22:29:23
8297
1
翻译 python 协程库 asyncio 翻译列表
asyncio 模块官网连接:https://docs.python.org/zh-cn/3.7/library/asyncio.html同步原语参考链接:https://mozillazg.com/2017/08/python-asyncio-note-synchronization-primitives.html异步参考:http://python.jobbole.com/88291/...
2019-05-24 16:29:19
1179
翻译 asyncio 系列五、同步原语—Synchronization Primitives
官网连接:https://docs.python.org/zh-cn/3.7/library/asyncio-sync.html将 Synchronization Primitives 暂且翻译为同步原语,设计目的是为了和线程模块相似。一、Lockclassasyncio.Lock(*,loop=None)为了实现任务之间的互斥,不是线程安全的。用于保证独自使用资源。...
2019-05-24 16:12:55
2478
翻译 asyncio 系列四、期程 — asyncio.Future
asyncio的期程官网链接:https://docs.python.org/zh-cn/3/library/asyncio-future.html#asyncio.Future其实期程指的是,classasyncio.Future返回的实例,官网翻译为期程。一、期程函数asyncio.isfuture(obj)如果obj为下面任意对象,返回Tru...
2019-05-24 16:09:03
2634
1
翻译 asyncio 系列四、asyncio 的异常
异常官网连接:https://docs.python.org/zh-cn/3.7/library/asyncio-exceptions.htmlexceptionasyncio.TimeoutError该操作已超过规定的截止日期。重要:这个异常与内置TimeoutError异常不同。exceptionasyncio.CancelledError该操...
2019-05-24 15:58:02
9747
2
翻译 asyncio 系列三、asyncio 队列
asyncio 队列classasyncio.Queue(maxsize=0,*,loop=None)先进,先出(FIFO)队列如果maxsize小于等于零,则队列尺寸是无限的。如果是大于0的整数,则当队列达到maxsize时,awaitput()将阻塞至某个元素被get()取出。不像标准库中的并发型queue,队列的尺寸一直是已知的,可以通过调用...
2019-05-24 15:54:16
3929
翻译 asyncio 系列二、asyncio 子进程
asyncio的子进程官网连接:https://docs.python.org/zh-cn/3.7/library/asyncio-subprocess.html官网例子:import asyncioasync def run(cmd): proc = await asyncio.create_subprocess_shell( cmd, ...
2019-05-24 15:49:34
4866
翻译 asyncio 系列一、asyncio 的协程与任务
asyncio 的协程与任务官网:https://docs.python.org/zh-cn/3/library/asyncio-task.html#scheduling-from-other-threads一、协程用async定义的函数,可以叫协程函数、异步函数,本文统一叫协程函数。调用协程函数返回的对象叫协程对象。关键字 await 调用协程函数,也可以叫等待、等待调用,这...
2019-05-24 15:46:41
8056
原创 记一次安装python3.7.3
1、默认python3、ipython3、pip的路径 name@host:~$ which python /usr/bin/python name@host:~$ which python3 /usr/bin/python3 name@host:~$ which pip /usr/local/bin/pip name@host:~$ wh...
2019-05-20 15:59:47
4463
3
原创 concurrent.futures调研
concurrent.futures调研参考链接:官网:https://docs.python.org/3.7/library/concurrent.futures.htmlhttps://learnku.com/docs/pymotw/concurrentfutures-manage-pools-of-concurrent-tasks/3424#48d590https://www...
2019-05-20 12:14:12
1083
转载 python获取函数名类名
参考链接:1.在类内部获取类名和方法名代码:import sysclass testsqawd(object): def hello(self): print('the name of method is ## {}##'.format(sys._getframe().f_code.co_name)) print('the name of...
2019-05-18 19:09:21
12903
原创 Python type hints 调研
Python type hints 调研参考链接:官网https://docs.python.org/3/library/typing.htmlhttps://ocavue.com/python_typing.htmlhttps://blog.youkuaiyun.com/chuchus/article/details/77891128https://www.cnblogs.com/er...
2019-05-06 16:09:35
1208
转载 python 捕捉退出事件
参考连接:http://www.python88.com/topic/1053/import os import sys import time import atexit import signal import tracebackdef term_sig_handler(signum, frame): print 'catched singal: %...
2019-04-28 12:10:15
4306
转载 Python 的异常处理
参考链接:https://blog.youkuaiyun.com/lengxingxing_/article/details/56317838https://segmentfault.com/a/1190000012625548一、利用traceback模块手自定义处理异常1、第一种解析方式'''1 第一种解析方式'''def f(): 1 / 0try: f()exc...
2019-04-28 12:02:14
1304
原创 django+celery+logging 配置
参考链接celery参考 celery中文官网:http://docs.jinkan.org/docs/celery/ celery英文官网:http://docs.celeryproject.org/en/latest https://www.cnblogs.com/forward-wang/p/5970806.html全局参考: https...
2019-04-19 19:16:26
2249
1
原创 python os.listdir() 和 os.rename() 遇到路径中有空格
当python的 os 模块的 os.listdir() 和os.rename() 遇到路径有空格时, 直接写这个路径就好了,不需要加任何修饰。比如一个路径为 'dirs/seagate backup plus drive',我们用一个变量d0表示这个路径, 即 d0 = 'dirs/seagate backup plus drive'...
2019-04-10 13:56:53
3326
原创 python的 textgrid 库调研小结
python-textgrid库 调研小结github官网:https://github.com/kylebgorman/textgridOverlapping intervals: http://www.rgrjr.com/emacs/overlap.html1.TextGrid文件结构:第一行是固定的:File type = "ooTextFile"第二行也是固定的:Obje...
2019-04-02 11:13:02
14149
原创 python各种库管理配置文件的比较
参考链接:https://stackoverflow.com/questions/19078170/python-how-would-you-save-a-simple-settings-config-fileinvoke.config官网:http://docs.pyinvoke.org/en/1.2/concepts/configuration.htmlpythonconfigpar...
2019-03-28 09:33:27
1824
转载 Linux 杀死进程
ps -aux 或者 ps -ef 查看所有进程kill 1827 就是杀死进程号为 1827 的进程参考链接: https://www.cnblogs.com/liaojie970/p/7131043.html1. 查看进程ps -ef | grep firefox 查找火狐的进程等价于: pgrep firefox等价于: pidof firefox等价于:...
2019-03-17 15:14:41
4905
原创 Linux 查看、挂载磁盘
参考链接:https://www.cnblogs.com/youbiyoufang/p/7607174.htmldf -T 查看已挂载的分区和文件类型 df 命令用于显示磁盘分区上的可使用的磁盘空间,-T 表示显示文件类型fdisk -l 可以显示出所有挂载和未挂载的分区,但不显示文件系统类型 移动硬盘一般是/dev/sdX1的形式,比如/dev/sdc...
2019-03-17 14:54:12
9801
原创 磁盘格式、Centos挂载exFAT格式磁盘
参考地址:https://www.cnblogs.com/ljminseu/p/5005805.htmlhttps://blog.youkuaiyun.com/gatieme/article/details/71075394exFAT的github官网:https://github.com/relan/exfat下载地址:www.rpmfind.net/linux/rpm2html/searc...
2019-03-16 21:25:10
8767
原创 python 的 f-string
参考的文章:https://blog.youkuaiyun.com/sunxb10/article/details/81036693https://www.tongpankt.com/4523https://mlln.cn/2018/05/19/python3%20f-string%E6%A0%BC%E5%BC%8F%E5%8C%96%E5%AD%97%E7%AC%A6%E4%B8%B2%E7%9...
2019-03-15 20:44:27
2052
原创 一个小例子看懂python3 的unicode编码
直接看例子In [10]: b'\u559c\u6b22\u4e00\u4e2a\u4eba' Out[10]: b'\\u559c\\u6b22\\u4e00\\u4e2a\\u4eba'In [11]: b'\u559c\u6b22\u4e00\u4e2a\u4eba'.decode('unicode_esca...
2019-02-28 15:39:41
2361
原创 celery-redis 的测试demo
celery 安装sudo pip3 install celeryredis安装sudo apt install redis-serverredis 启动redis-server测试redis是否启动user@host: ~$ redis-cli127.0.0.1:6379> pingPONG如图创建 celery_app_1.p...
2019-02-27 18:47:11
1174
转载 urlopen错误配置ssl
SSL证书问题在python不知道哪个版本开始,urlopen发送请求时就出现了ssl证书报错的问题解决办法import sslssl._create_default_https_content = ssl._create_unverified_context...
2019-02-22 13:58:08
1285
转载 ODPS SQL 大全
目录索引 一、字符串函数 二、窗口函数 三、聚合函数 四、日期函数 五、数学函数 一、字符串函数1.char_matchcountbigint char_matchcount(string str1, string str2)用途:用于计算字符串str1中的字符有多少个出现在字符串str2中;2.charstring char(bigint ascii)用途:将一...
2019-02-22 13:56:16
19889
翻译 大数据集群组件参数化
集群组件参数化 一、HDFS 1.1、namenode 内存 1.2、datanode 内存 1.3、fs.trash.interval 1.4、dfs.datanode.du.reserved 1.5、dfs.namenode.handler.count 二、YARN 2.1、Memory allocated for all YARN con...
2019-02-22 13:53:45
2880
转载 Ambari 部署文档
Ambari 部署文档 说明: 一、把所需要的文件放到指定的目录下 二、集群主机配置(所有节点都要执行的) 2.1、安装前主机需要的软件 2.2、配置 NTP 服务(由邓哥配置完成) 2.3、配置主机名和 DNS 2.4、配置防火墙(邓哥配置完成) 2.5、关闭 SELINUX 2.5.1、确保 SELINUX 处于关闭状态(该设置是永久关闭,但...
2019-02-22 13:51:47
2443
2
转载 MongoDB 分片磁盘出现不均问题
liuwei 创建于 2018-08-13 08:30;更新于 2018-08-13 08:32问题描述:现在的问题是 d-2ze3c57fd30b1294 这个分片的磁盘使用是 32.7%而 d-2ze509f107c83dc4 shard 磁盘的使用才 17.6% 相差快一倍了,数据量大的集合基本上都是分块数均匀的,为什么不同的 shard 磁盘使用却有这么大的差距,mongo...
2019-02-22 12:01:55
2113
转载 MongoDB 和 PolarDB 加载数据数据测试的情况记录报告
liuwei 创建于 2018-07-07 22:34;更新于 2018-08-13 08:31mongodb 和 polardb 加载数据数据测试的情况记录报告1、mongodb 集群的配置情况1.1、mongos2 个 mongos 每个的配置为:2 核 4 GB1.2、shards总共有 8 个 shard,每个 shard 配置为 4 核 8 GB2、加载的表的...
2019-02-22 11:59:52
1334
转载 Elasticsearch 集群安装文档
1. 说明 2. 环境准备 2.1. 集群列表 2.2. 最大文件打开数 2.3. Java 的 JDK 3. Elasticsearch 的安装 3.1. 从官网下载安装包 3.2. 解压到指定的目录下 3.3. 角色分配 3.4. Elasticsearch.yml 设置 3.5. jvm.options 配置 3.6. Elasticsearch 启动...
2019-02-22 11:58:40
2369
1
转载 mysql 主从搭建
from@liuwei Centos7+mysql5.7.21主从配置数据目录设置:字符集设置:开机自动重启设置:192.168.200.108:slave192.168.200.109:master一、安装主从 mysql 都需要进行下面的操作1、卸载系统自带的 mariadb-lib[srvadmin@du-s8-idc soft]$ rpm -qa | ...
2019-02-22 09:57:43
948
翻译 阿里云实例实时监控数据入库的表结构设计~
建表指令如下:ecs:create table ecs_data(id int(11) primary key auto_increment,host varchar(100) default null,metric varchar(100) default null,value_num int(11) default null,value_attr varchar(100) d...
2019-02-21 11:22:52
1423
翻译 Gitlab 备份与恢复操作规程
背景目前公司的代码管理服务器是自建的 Gitlab 服务(公司内网),URL链接 http://git.du.com(192.168.2.8), 同时Bitbucket 上也有一份同步的在线代码备份,为保证代码数据的安全性,需要在公司内部也有一份离线备份,故有以下备份恢复方案。方案做本方案的目的是保证代码数据的安全而备份,同时一旦代码服务器故障能及时迁移恢复。Gitlab 的备份与...
2019-02-21 11:19:46
1646
1
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人