- 博客(33)
- 资源 (1)
- 收藏
- 关注
RSS订阅原创 搭建atlas
参考文档：https://blog.youkuaiyun.com/u012925673/article/details/107513974启动顺序：手动启动hbase手动启动solr手动启动atlas
2020-10-14 16:19:50
420
原创 spark写入hadoop为空
这个主要是因为我使用的本地开发，然后是使用的阿里的服务器，导致写入到hdfs的时候文件写入进去了，但是一直写的都是空文件，
2020-09-29 22:36:47
517
原创 windows安装orientDB
去官网下载orientDBhttp://orientdb.com/download/下载后配置环境变量，将orientdb/bin配置到环境变量点击server.bat直接运行第一次运行会让修改密码
2020-08-12 14:29:25
656
原创 docker与windows10共享文件夹
在菜鸟教程里面有一篇文章讲到了怎么样安装docker，地址:https://www.runoob.com/docker/windows-docker-install.html这个里面讲到了两种方法，里面有一种是关于win7,win8的，还有一种是关于win10的，一定要看到后面，如果是win10系统那么就使用win10的方法，这样安装起来就要方便很多。安装完成后，这里省略一些步骤，直接跳到setting这里直接把要共享的文件夹添加进来，然后docker启动的时候使用-v命令指定这个目录，
2020-07-18 17:16:30
2152
2
原创 docker安装sshd服务
docker安装了centos启动后默认是没有sshd服务的，而且22端口也没有被占用首先，使用镜像创建一个容器：docker run -itd--privileged--name myCentos centos/usr/sbin/init如果不这样创建的话，后面可能会出问题创建完成后，使用下面的进入容器docker exec -it myCentos/bin/bash进入docker容器后，安装sshd服务：yum install -y openssh openss...
2020-07-18 10:57:22
1144
原创 windows下安装mysql
windows下安装mysql有两种方式，一种是msi，一种是zip，之前我都是使用的msi方式，后来使用msi安装的时候一直报错，就使用了zip的方式安装，发现zip安装的方式快多了，而且很简单，下面我使用zip的方式安装mysql:参考博客：https://blog.youkuaiyun.com/liumaolincycle/article/details/51992535首先去官网下载mysql...
2019-10-09 09:28:52
129
原创 flink集群安装
在flink官网或者别的地方下载，我下载的是flink-1.5.0-bin-scala_2.11.tgz将flink上传到服务器，修改conf/flink-conf.yaml:设置jobmanager.rpc.address为master地址（如果需要设置分配的内存大小，可以另外设置jobmanager.heap.mb和taskmanager.heap.mb）修改conf/slav...
2019-10-08 14:32:44
117
原创 hue添加spark sql
hue添加spark sql需要使用到livy,下载地址：http://livy.incubator.apache.org/download/配置：https://www.cnblogs.com/chengjunhao/p/9067666.html
2019-09-22 17:50:54
3146
原创 linux跨机器设置目录共享
linux与linux之间可以通过nfs或者samba来进行挂载然后进行文件共享，samba还可以用来与windows共享，配置起来也更麻烦一些，而且需要用到cifs，所以这里使用nfs的格式来进行挂载，nfs配置超级简单。首先，我们假设有两台机器，其中一台为master,另外一台为worker,这台worker想要共享master上面的/opt/output文件夹，在worker本地也有一个...
2019-09-20 10:22:13
558
原创 deepin安装mysql只能root用户登录并且不需要密码
安装mysql的命令是sudo apt-get installl mysql,这样安装的mariadb首先，切换deepin中的用户为root用户，因为不是root用户就登录不了mariadb，首先修改mariadb中root的密码：sudo mysqladmin -u root password newpassword修改了密码后使用root登录发现还是不需要密码，先登录数据库，...
2019-08-31 20:17:31
1081
3
原创 maven打包的时候将依赖也打进去
<build> <plugins> <plugin> <artifactId>maven-assembly-plugin</artifactId> <configuration> <appendAssemblyId...
2019-08-19 16:37:13
1256
原创 deepin intellij安装console字体
从windows转到deepin之后，使用的ide里面发现没有console字体，去站长之家或者别的网站下载console字体，然后将下载的字体放到/usr/share/fonts/下面然后使用下面的命令更新缓存：sudo fc-cache -f -v查看是否安装成功：> fc-list |grep consolas/usr/share/fonts/truetype/co...
2019-08-10 10:52:59
713
原创 geomesa生成数据到hbase:The version of ZooKeeper being used doesn't support Container nodes. CreateMode.PE
这个错误其实是没有错误的，我解决这个问题的时候发现并不是zookeeper版本的问题，而是hbase写入的问题，我期间换了更高版本的zookeeper，但是还是会报这个错误。后来我用java测试hbase写入的时候发现hbase写入不了，解决了用java写入数据到hbase后就可以了...
2019-07-26 15:19:27
3721
原创 hadoop无法退出安全模式
首先我在网上找到的都是一模一样的答案，都是使用命令退出安全模式，我先把这两个命令写上吧，一般情况下这两个命令就可以解决常见的一些问题。首先使用下面这一条命令检查安全模式是否开启： bin/hdfsdfsadmin-safemode get输出结果会显示安全模式是属于开启状态还是关闭状态，如果是开启状态，可以使用下面这一条命令来关闭：bin/hdfsdfsa...
2019-07-23 15:19:07
2779
原创 启动hadoop报错：Unable to load native-hadoop library for your platform... using builtin-java classes wher
好吧，写之前先吐槽一下百度，这个问题我用百度查了很久，都是千篇一律的答案，网上的答案都是什么更新glib什么重新编译包什么的，都是复制粘贴的，百度确实要好好整理整理了，搞的这么简单的问题我弄了一天都没有弄好，我还更新了，重新编译了，都没有用，谷歌三分钟就搞定了，还是谷歌好用啊。废话不多说了：在etc/hadoop/hadoop-env.sh中的HADOOP_OPTS修改为以下值：expor...
2019-07-22 14:13:36
2869
原创 查看maven库中jar包有哪些方法
先提供一个网址：https://www.mvnjar.com/org.apache.hive/hive-service/0.12.0/detail.html
2019-04-08 14:13:11
2211
原创 查看ambari组件安装的位置
由于使用ambari安装的solr，但是不知道solr在linux的哪个位置，使用一下方法可以找到其安装的位置：rpm -qa | grep solrrpm -ql ambari-infra-solr-2.7.1.0-169.noarch...
2019-04-08 10:33:43
1423
原创 使用start-dfs.sh的时候需要输入密码
配置ssh:语法：ssh-keygen -t rsa然后连按三次回车（就会生成两个文件id_rsa（私钥）、id_rsa.pub（公钥））将公钥拷贝到要免密码登录的机器上面：ssh-copy-id hadoop102 现在使用start-dfs.sh就可以不需要输入密码了...
2019-02-13 14:51:07
3752
原创 Access denied for user 'root'
出现这种问题用如下方法解决：grant all privileges on *.* to 'root'@'localhost' identified by 'root' with grant option;flush privileges；
2018-11-17 12:37:16
501
原创 linux删除桌面
关闭开机的时候启动动画：在 /boot/grub/grub.cfg 中：将“rhgb quiet” 改为 “quiet”如果没有图形化界面，可以使用下面的方法开启网络：cd /etc/sysconfig/network-scripts/vi ifcfg-eth0将ONBOOT=NO改成YES保存退出使用命令service network start，就会发现网络...
2018-11-13 18:36:47
1914
原创 hive初始化元数据库Access denied for user 'atguigu'@'%' to database 'metastore
我将debby数据库换成Mysql数据库的时候，按照配置修改好配置文件后，使用初始化数据库的命令 schematool -dbType mysql -initSchema 初始化数据库的时候出现了下面这个问题:这里是因为用户atguigu的权限有问题(atguigu是我安装Mysql后在mysql上面新建的用户),所以我们需要给atguigu这个用户分配权限。我们先用root账户登录m...
2018-11-06 11:50:11
1551
转载 hive数据类型
基础类型：复杂类型：在建表的时候要对行进行处理： row format delimited fields terminated by ',' : 每行中列与列的分隔符是, collection items terminated by '_', array 和 sturct的分隔符是_ map keys terminated by ':' , map 键值对的分...
2018-10-31 08:30:16
190
原创 hive java.net.URISyntaxException: Relative path in absolute URI: ${system:java.io.tmpdir...}
在hive-site.xml中加入一下内容： <property> <name>system:java.io.tmpdir</name> <value>/tmp/hive/java</value> </property> <property> <name&
2018-10-30 20:10:55
1703
1
原创 centos修改mysql root账户的密码
刚才修改root账户的密码，看到了一种方法，不知道是自己不会弄还是怎么了，发现修改了root账户的密码后,再次登录mysql的时候还是不需要密码，而且show databases的时候发现mysql库不见了，我弄了很久还是没有弄出来，于是就卸载重装了。我之前用的就是下面这种方法： 进入mysql库，然后执行：update user set password=passwor...
2018-10-30 11:05:27
357
原创 Hive的环境搭建
Hive是一种数据仓库，可以使用sql语句去操作haoop中hdfs中的文件查询。（本质上是把Hive发送的sql语句在内部转换成可以执行的mapreduce程序），(迭代数据无法表达，处理时间较长等缺点)首先，去官网下载Hive的-bin.tar.gz的压缩包，然后发送到虚拟机上。 一：解压：tar -xzvf apache-hive-2.3.3-bin....
2018-10-29 18:14:33
179
原创 hadoop基础命令
HDFS创建文件夹：hadoop fs -mkdir /foldernameHDFS创建多层文件夹：hadoop fs -mkdir -p /foldername1/foldername2/foldername3从HDFS中删除文件夹：hadoop fs -rm -r /foldername修改文件的权限：hadoop fs -chmod 777 /foldername ...
2018-10-29 16:01:57
348
原创 zookeeper搭建
搭建zookeeper前先要搭建好java环境将zookeeper的压缩包解压配置zoo.cfg(conf/zoo_sample.cfg文件重命名为zoo.cfg)： 修改dataDir的值：eg: dataDir=/opt/module/zookeeper-3.4.13/zkData(表示存储持久化数据的位置）独立模式操作：zkServ...
2018-10-28 20:52:35
118
原创 c++基础知识
c++与java等语言比起来最主要的是可以访问内存(*,&)int val1 = 1023;那么我们应该怎么样访问val1的地址值呢？又怎么样存放内存地址值呢？c++支持使用指针类型存放内存地址值（*），可以使用&取到地址值。内存分为静态内存和动态内存： a: 静态内存是有名字的变量，直接对其进行操作(也可以通过指针操作，但是效率比较低，...
2018-10-27 21:23:02
135
原创 启动namenode的时候没有启动secondarynamenode
这篇文章是在不同的机器上配置namenode和secondarynamenode出现的问题。对于配置文件的写法，可以参考我的这一片文章：https://blog.youkuaiyun.com/qq_37076742/article/details/83104395我出现的问题是在配置有namenode机器上输入start-dfs.sh命令的时候，过一会儿就会一直阻塞在那里，而其它的机器datanode...
2018-10-19 11:15:57
11727
原创 在不同的机器上配置secondarynamenode
只需要修改namenode那台主机的配置文件即可：修改hdfs-site.xml：<configuration><property> <name>dfs.replication</name> <value>3</value></property><property&
2018-10-17 09:02:04
2490
原创 Intellidea运行当前类的时候自动编译其他的类
intellidea是一款很强大的开发工具，但是运行当前类的时候会自动编译其他的类，我在网上找了很多的方法，都是说先将compile方式改成eclipse的编译方式，然后修改成build no error check,我试了一下，根本没有用，今天无意中试出来了，和大家分享一下。compile编译方式不用修改，你只需要这样修改就可以了 这样就OK了，不需要修改compile方...
2018-08-18 08:41:01
7868
4
原创 intellij IDEA中文怎么样转换成Ascii
今天在网上看视频的时候，因为别人是使用myelicpse开发的，可以打出中文直接转换成ascii码,但是intellij IDEA好像不支持这个功能，至少我没有找到，找到的朋友欢迎评论区留言。当你打好中文后，可以在设置中选择图中箭头标向的地方，但是不知道为什么，有时候转换不过来，出bug了吧。但是有另外一种方法可以实现中文与ascii之间的转换，也许比这个麻烦，但是也就只能这样将就用了，感...
2018-04-20 17:24:10
2591
原创 修改AppCompatActivity的标栏
怎么样修改AppCompatActivity的标题栏当我们在android studio中新建一个ui界面的时候经常会发现有AppCompatActivity这种布局，它自带了标题栏，但是这种标题栏有时候不能达到我们的需求，这时候我们就要自定义标题栏了。今天上午我百度了好久终于解决了。首先，我们需要修改AndroidManifest里面的文件： android:theme=”@style
2017-12-17 15:38:49
1890
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人