youngerblue

周末无聊拿起很久之前买的那本 python核心编程，翻了一下，感觉python果然简洁，比java方便多了。如果线上需要执行一个业务简单的小功能，完全可以直接写个python文件扔到线上直接执行。 下面是读取log日志的，先记录，继续改进中 # -*- coding: UTF-8 –*- ''' Created on 2012-5-26 @author: lyh ''' d...

搜索一直用的是coreseek，数据源方面用的是python，以前数据量少的时候没问题，数据量一大，用python建索引就出现问题。未做优化前，python建索引的过程的第一步就是先捞出所有的数据放内存，这也是官网文档的做法，数据量一大，必然导致占用内存过大，导致进程终止或者服务器负载过高。实际数据：200W，在执行python数据源时，内存达到2g以上。优化后的数据：内存维持在427M，没有继续...