Shie_3的博客

1、奇数性下面的方法是否能确定其参数是否为奇数：public static boolean isOdd(int i) { return i % 2 == 1;}奇数可定义为被2整除余数为1的整数，因此上面的方法看起来可行。但是很遗憾，在四分之一的时间里它返回的都是错误答案。 为什么是四分之一呢？因为在所有int数值中，有一半是负数，而isOdd方法对所有的付奇数的判断都会失败。 其实，

GC是jvm自动内存管理机制的具体实现。在HotSpot中，GC的工作主要划分为两大块，分别是内存的动态分配和垃圾回收。jvm中存活对象的生命周期具有两极化，因此该采取不同的垃圾收集策略，分代收集由此诞生。java堆内存划分为新生代(YoungGen)和老年代(OldGen)，其中新生代又划分为Eden区、From Survivor区和To Survivor区。1、标记算法垃圾标记算法...

ContextCleaner是用于清理spark执行过程中内存，主要用于清理任务执行过程中生成的缓存RDD、Broadcast、Accumulator、Shuffle数据，防止造成内存压力。 ContextCleaner会在SparkContext创建过程中，被实例化：_cleaner = if (_conf.getBoolean("spark.cleaner.referen...

在linux平台，spark读取hdfs上的parquet文件时，抛出的Snappy类不能初始化：java.util.concurrent.ExecutionException: java.lang.NoClassDefFoundError: Could not initialize class org.xerial.snappy.Snappy...Caused by: jav...