
超大数据量
wwlhz
这个作者很懒,什么都没留下…
展开
-
Cassandra 导出表结构
cassandra中 数据库是 keyspace, 里面有表。导出为:./cqlsh 127.0.0.1 -e 'desc keyspace keyspace_name' -u user -p pwd > db.cql导入为:./cqlsh 192.168.198.51 -u cassandra -p cassandra -f db.cqlhttps://www.cnblogs.com/TSlover/p/11398535.htmlhttps://blog.youkuaiyun.com/u010原创 2020-07-10 14:29:33 · 1214 阅读 · 0 评论 -
Python多进程并发[glob,concurrent和Pool]
简单的代码只能单核处理,当处理超大量数据时,会非常慢。可以用concurrent 或Pool。with concurrent.futures.ProcessPoolExecutor() as executor: roots = glob('/root/code/ocr/dataset/images/*.jpg') executor.map(verify...原创 2019-12-12 11:34:30 · 401 阅读 · 0 评论