
大数据相关
文章平均质量分 93
sinat_27747695
这个作者很懒,什么都没留下…
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
linux环境下启动HA后,eclipse新建MapReduce project出现9000端口问题
在搭建好HA集群后,尝试创建MapReduce工程,然后就报错了网上找了很多文章,折腾了好久,解决办法是:对,就是DFS Master host 的端口问题我在hdfs-site.xml文件中配置的rpc地址是这样的最后连接正常网上看到说default ns应该跟rpc的端口一致我遇到的问题是这样解决的,给大家一个参考原创 2017-05-12 18:16:10 · 991 阅读 · 0 评论 -
elasticsearch与Lucene相关介绍
Lucene是apache软件基金会4 jakarta项目组的一个子项目,是一个开放源代码的全文检索引擎工具包,但它不是一个完整的全文检索引擎,而是一个全文检索引擎的架构,提供了完整的查询引擎和索引引擎,部分文本分析引擎,它可以方便的嵌入到各种应用中实现针对应用的全文索引/检索功能。ElasticSearch是一个基于Lucene的搜索服务器。它提供了一个分布式多用户能力的全文搜索引擎,基于R原创 2017-08-20 21:31:29 · 5869 阅读 · 0 评论 -
Elasticsearch5.0 安装问题集锦
elasticsearch 5.0 安装过程中遇到了一些问题,通过查找资料几乎都解决掉了,这里简单记录一下 ,供以后查阅参考,也希望可以帮助遇到同样问题的你。问题一:警告提示[2016-11-06T16:27:21,712][WARN ][o.e.b.JNANatives ] unable to install syscall filter: java.lang.Unsupported转载 2017-06-25 22:21:59 · 256 阅读 · 0 评论 -
elasticsearch中IK分词处理
嗯,弄完ANSJ分词,今天上IK分词。原创 2017-06-20 13:50:14 · 560 阅读 · 0 评论 -
Solr初步探索(二)
Solr5之后内置了jetty作为服务器,可以自行启动。默认端口是8983这里参考网上的Java连接solr代码(做了一些小改动)import org.apache.solr.client.solrj.SolrQuery;import org.apache.solr.client.solrj.SolrServer;import org.apache.solr.client.solrj.原创 2017-06-29 15:10:20 · 295 阅读 · 0 评论 -
Solr初步探索(一)
由于任务需求要用到Solr,所以在对Solr使用做探究运行环境:centOS6.5Solr版本:5.5.2准备好solr5.2.2的安装包,下面开始安装:1. tar -zxvf solr-5.5.2.tgz2.cd solr-5.5.2/bin; 执行命令:./solr start -e cloud -noprompt可以看到Welcom原创 2017-06-29 13:55:41 · 358 阅读 · 0 评论 -
elasticsearch中ANSJ中文分词处理
这两天又在折腾ES,之前在centOS上有装过elasticsearch2.4.3和5.3.1。然后需要对中文进行分词,老大建议用ANSJ,所以放弃了使用IK分词器。但是在装ANSJ的时候出现了问题,貌似并木有合适的版本源。在成功把虚拟机玩挂了之后还是老老实实用了2.3.1版本,至于ES环境的相关配置可以参考之前的博文。不说废话了,开工。ES如果要拿来做ANSJ中文分词的话,建议使用如原创 2017-06-19 18:36:16 · 5789 阅读 · 3 评论 -
elasticsearch安装及使用示例
相关环境:centos6.6、jdk1.8_0_40、ES2.4.3注意:ES的执行不能使用root用户,需先新建一个用户并授权1.将下载好的elasticsearch-2.4.3.tar.gz上传到Linux下2.解压:tar -zxvf elasticsearch-2.4.3.tar.gz3.修改elasticsearch-2.4.3/config目录下的elasticse原创 2017-06-05 13:38:35 · 1593 阅读 · 0 评论 -
Hadoop2.x搭建步骤
在Linux上搭建好ssh免密环境后,先从Windows本地把hadoop-2.5.1-x64.tar.gz上传到节点node1上;1.tar -zxvf hadoop-2.5.1-x64.tar.gz;2.ln -sf /root/hadoop-2.5.1 /home/hadoop-2.5(建软链)3. cd /home/ hadoop-2.5 -> cd etc/hadoop/原创 2017-04-23 01:53:20 · 374 阅读 · 0 评论 -
配置Kibina公网访问 启动时出现[fatal] Error: listen EADDRNOTAVAIL kibina
在测试服务器上搭了Elasticsearch5.4的环境,安装Kibana时为了图方便想直接在公网访问(不安全)首先需要在阿里云上配置安全组访问规则,开放需要访问的端口对Kibana的配置如下:编辑/config下的kibana.yml开放server.port: 5601server.host: "ip"elasticsearch.url: "http://ip:9200"这三项配置,其中的ip...原创 2018-02-15 15:04:11 · 3508 阅读 · 0 评论