
大数据/ELK/库
文章平均质量分 59
大数据相关,包含大数据使用的库。Hive、Presto、ELK、Flume、Datax、Hdfs、Impala、Phoenix、Hbase
石头wang
平凡码农,强迫症,抠细节。
展开
-
MacOS下postgresql(pgsql)数据库密码为什么不需要填写或可以乱填写
MacOS下postgresql(pgsql)数据库密码似乎可以不填或乱填都可以登录,这个是因为安全策略认为本地连接是安全的,默认配置如此。然后你会发现无密码登录后执行以下修改postgres用户的密码并重启pgsql进程后,依然不需要密码。至此,再重启pgsql的进程,然后发现本地连接也需要输入密码了。(下图,本来全是trust的值,全部改成password)要求改pg_hba.conf这个配置文件。转义一下,进入后vi修改配置文件。后面的路径就是配置文件的目录。,注意中间有空格要加。...原创 2022-08-01 09:13:42 · 1178 阅读 · 0 评论 -
安装Mac版Mysql卡在Installation阶段,彻底清理mysql并重装mysql
安装Mac版Mysql卡在Installation阶段,彻底清理mysql并重装mysql原创 2022-08-01 19:30:00 · 3045 阅读 · 1 评论 -
大数据入门必看这些基本概念:Pig、Hive、Hadoop、Storm诠释
今天给大家分享一篇关于大数据生态系统入门必看:Pig、Hive、Hadoop、Storm等白话诠释,剖析大数据该如何存储到硬盘上?存储数据后,该考虑如何处理数据?什么是Map?什么是Reduce?Hive、Pig、Storm技术是如何产生的?下面我们一起来看一下吧。大数据本身是个很宽泛的概念,Hadoop生态圈(或者泛生态圈)基本上都是为了处理超过单机尺度的数据处理而诞生的。你可以把它比作一个厨房所以需要的各种工具。锅碗瓢盆,各有各的用处,互相之间又有重合。你可以用汤锅直接当碗吃饭喝汤,你可以用小刀或者刨转载 2020-10-13 15:08:26 · 252 阅读 · 1 评论 -
Centos7安装elastic 6.x(6.8.8)集群(亲测可行)
安装elastic集群注意:别选太高版本的es,比如7.6.2 就需要jdk11了,我们选一个jdk8可以支持的版本。本文选择6.8.8,貌似这已经是最后一个支持jdk8的了我们这里仅仅安装es,不考虑elk下载安装包下载链接一般要下载历史的版本,才能支持jdk8,官方会说明要求的jdk版本如何查找到历史的版本:官网下载页 找到 past release 下载历史的版本正...原创 2020-04-22 20:27:58 · 2363 阅读 · 0 评论 -
Hbase 常用 shell命令
Hbase 常用 shell命令常用命令名称命令连接./hbase shell(要连接哪里的hbase,修改hbase-site.xml的配置。zookeeper.znode.parent可以不配置,默认/hbase,该配置文件建附录)创建表create ‘表名’, ‘列族名1’,‘列族名2’,‘列族名N’查看所有表list描述表describe ...原创 2019-10-15 15:09:44 · 434 阅读 · 0 评论 -
Storm的进程、线程、任务数和线程安全问题研究(一篇明白)
Storm的进程、线程、任务数和线程安全问题研究(一篇明白)基于Storm 1.0.6 版本本文查阅了许多资料并反复琢磨,应该能做到一篇明白Storm的worker进程、线程、任务关系一、概念进程:即worker进程,工作进程,Java进程,或称JVM进程线程:即executor,由进程产生,用于执行任务任务:即task,任务就是被线程执行的东西,数据会流过task,线...原创 2019-03-26 18:08:44 · 1931 阅读 · 1 评论