- 博客(10)
- 资源 (4)
- 收藏
- 关注
RSS订阅原创 阿里云开放端口配置
双十一购买了阿里云服务器，部署spark集群时，遇到slave连不上master的情况。网上都说需要配置安全组规则，如下图已经配置了但依旧不能生效。最后终于发现，原来是安全组内实例列表内没有实例，需要把需要开端口的实例加进去才能生效...
2020-11-18 16:57:00
271
原创 spark部署报绑定端口失败问题解决
安装配置spark后，启动spark集群，报错如下16/03/30 14:33:02 WARN util.Utils: Service 'sparkMaster' could not bind on port 7077. Attempting port 7078.16/03/30 14:33:02 WARN util.Utils: Service 'sparkMaster' could not bind on port 7078. Attempting port 7079.16/03/30 14:3
2020-11-17 21:20:43
1372
原创 lsof命令安装使用
部署spark集群时发现7077端口无法绑定，于是准备查看端口占用情况lsof -i 7077竟然提示lsof命令找不到，简直不能容忍于是yum果断安装yum install lsof
2020-11-17 20:41:22
937
原创 jps命令安装使用
今天在机器上安装部署spark时发现jps命令竟然没有，对于经常使用这个命令的我来说简直不能忍受。安装其实安装这个命令也很简单，yum安装即可。先安装jdk,我安装的jdk8yum install java-1.8.0-openjdk.x86_64安装完jdk8之后再安装openjdk-develyum install java-1.8.0-openjdk-devel.x86_64使用jps(Java Virtual Machine Process Status Too.
2020-11-17 15:40:35
8696
原创 配置SSH免密登录遇到的问题及解决方法
双十一申请了几台云服务器，有阿里云1台，腾讯云1台，百度云2台。希望用这四台云服务器搭建大数据平台，自己用来玩转大数据。奈何在配置这几台服务器的免密登录时就遇到了问题，耗费了将近三个小时才解决。当然问题的解决也让我对免密登录的原理有了更深入的理解，以前只是知道免密登录的用途。配置免密登录还是很常用的，比如使用git，jenkins，以及集群节点之间的互相通信等。 问题描述：这四台服务器配置免密登录后，百度云的一台，无法被其他机器免密登录，其他机器ssh到这台机器还是提示需要...
2020-11-15 20:23:06
3340
原创 JDBC连接MySQL数据库时区问题
JDBC连接MySQL数据库时区问题：The server time zone value ‘�й���ʱ��‘ is unrecognized or represents more than onJDBC连接MySQLa数据库时区问题：Thie server atime zonge valuue '�йi���xʱ��' is unrecognized or represents more than one time zone. You must configure either th..
2020-10-09 14:00:36
1734
1
原创 java中序列化和反序列化深入探究
前言相信序列化和反序列化在开发中经常用到，javaBean也往往被建议实现Serializable接口，那么到底什么是序列化？为什么实现了Serializable接口就可以进行序列化了？序列化方式有哪些？这些序列化方式各自的优缺点有哪些？这些问题都是本文将探讨的问题。概念网上搜索序列化定义往往都是Java对象转换为字节序列的过程，我觉得这个定义不够友好，这次我倒觉得百度百科的定义值得借鉴：序列化 (Serialization)是将对象的状态信息转换为可以存储或传输的形式的过程。在序列化期间，对象
2020-07-29 14:22:54
245
原创 外部类，内部类以及静态内部类的加载关系深入探讨
前言： 在看单例模式的时候，在网上找帖子看见其中有一种（IoDH） 实现单例的方式，其中用到了静态内部类，文章中有写到当jvm加载外部类的时候，并没有加载静态内部内这和之前自己想的不一样，特意在网上找了一些帖子总结一下。一、学习前千的疑问： 稍微了解Java虚拟机内的加载过程的步骤，都很清楚，一个类的静态资源、一些常量都是在类加载的时候就被加载金内存中分配空间了，所以我一开始理所当然的以为静态内部类中的静态变量同样属于静态资源，也应该在在内加载的时候被加载，然而实际情况却不是这样的，带着这个
2020-07-19 17:34:29
598
groovy脚本转painless语法总结
2019-02-25
elasticsearch对painless脚本的常用操作api实例
2019-02-25
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人