my201110lc的博客

※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※方案：1.全量索引在晚上进行，不给线上业务库造成压力；2.全量索引在定时任务周期内跑不完时，通过MapReduce方式进行，查到最大id...

※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※※优化点：0.硬件提升，采用SSD，大内存，多核CPU的机器；1.不要返回较大数据集，按一页100条的标准，分页深度不要大于100，分页总...

 背景：在数据和服务都准备完成的情况下，打开页面，发现请求需要要几秒才返回；思路：1.查看搜索接口请求本身耗时情况，排除网络抖动因素，发现搜索接口请求到ES返回结果本身耗时较高；2.检查每次请求到ES的入参，并在原有参数中加入"profile": true，查看ES处理搜索请求的耗时分布情况；入参：返回：发现只是一个简单的termQuery耗时818ms，然后查看是...

文档内容分为两部分：1.索引过程；2.搜索过程；注：涉及到实现部分打算在另外一篇文章单独写；索引过程：简单的讲，索引过程分为创建索引节点，构建schema，原数据采集，分词，构建doc，提交索引；打个比方，我们现在有一个用户表，定义为：idintnamevarcharaddressvarchar现在，要