HBase GC的前生今世 - 身世篇

网易视频云是网易倾力打造的一款基于云计算的分布式多媒体处理集群和专业音视频技术,提供稳定流畅、低时延、高并发的视频直播、录制、存储、转码及点播等音视频的PAAS服务,在线教育、远程医疗、娱乐秀场、在线金融等各行业及企业用户只需经过简单的开发即可打造在线音视频平台。现在,网易视频云的技术专家给大家分享一则技术文:HBase GC的前生今世 - 身世篇。

在之前的HBase BlockCache系列文章中已经简单提到:使用LRUBlockCache缓存机制会因为CMS GC策略导致内存碎片过多,从而可能引发臭名昭著的Full GC,触发可怕的’stop-the-world’暂停,严重影响上层业务;而Bucket Cache缓存机制因为在初始化的时候就申请了一片固定大小的内存作为缓存,缓存淘汰不再由 JVM管理,数据Block的缓存操作只是对这篇空间的访问和覆盖,因而大大减少了内存碎片的出现,降低了Full GC发生的频率。那CMS GC策略如何导致内存碎片过多?内存碎片过多如何触发Full GC?HBase在演进的道路上又如何不断优化CMS GC?接下来这个系列《HBase GC的前生今生》将会为你一一揭开谜底,这个系列一共两篇文章,本篇文章-’身世篇’将会带你全面了解HBase的GC机制,后面一篇-’演进篇’将会给你道出HBase在发展的道路上如何不断对Full GC进行优化。

Java GC概述

整个HBase是构建在JVM虚拟机上的,因此了解HBase的内存管理机制以及不同缓存机制对GC的影响,就必须对Java GC有一个全面的了解。至于深入地理解Java GC 的工作原理,不在本文的讨论范围之内;当然,如果已经对Java GC比较熟悉,也可以跳过此节。

Java GC建立在这样一个假设基础上的:大多数内存对象要么生存周期比较短,很快就会没人引用,比如处理RPC请求的buffer可能只会生存几微秒;要么生存周期比较长,比如Block Cache中的热点Block,可能就会生存几分钟,甚至更长时间。基于这样的事实,JVM将整个堆内存分为两个部分:新生代(young generation)和老生代(tenured generation),除此之外,JVM还有一个非堆内存区-Perm区,主要存放class信息以及其他meta元信息,内存结构如下图所示:

999

其中Young区又分为Eden区和两个Survivor 区:S0和S1。一个内存对象在创建之后,首先会为其在新生代申请一块内存空间,如果这个对象在新生代存活了很长时间,会将其迁移到

<think>嗯,用户遇到了一个Java程序运行时的错误,具体是执行`java -jar hbase-manager-admin-2.0.9.jar`时提示无法访问jar文件。首先,我需要分析可能的原因。 用户给出的路径是`~/software/hbase-manager-2.0.8-hbase-2.x/`,但尝试运行的jar文件版本是2.0.9,而目录名是2.0.8。这可能是一个版本不匹配的问题,用户可能下载了不同版本的jar文件,或者目录名没有更新。这时候需要检查文件名是否正确,是否存在拼写错误或者版本号不一致的情况。 接下来,用户执行命令的当前目录是否正确?用户显示的路径是在`hbase-manager-2.0.8-hbase-2.x`目录下,但可能该目录下并没有hbase-manager-admin-2.0.9.jar文件。这时候需要使用`ls`命令来确认该文件是否存在,或者是否有权限问题。 另外,文件权限也是一个常见的问题。如果jar文件没有可读权限,Java无法读取它,导致错误。这时候需要检查文件的权限设置,使用`ls -l`查看,并用`chmod`修改权限。 还有可能是文件损坏,虽然可能性较低,但如果用户下载过程中出现问题,可能导致jar文件不完整。这时候可以重新下载文件,或者检查文件的哈希值是否匹配。 综合这些可能性,我应该分步骤引导用户检查文件名、路径、权限以及文件完整性。同时,提醒用户注意版本号和目录结构的一致性,避免因路径错误导致的问题。需要确保用户能够逐步排查,找到具体原因,并给出相应的解决命令,比如ls、pwd、chmod等,帮助用户自己解决问题。</think>你遇到的错误信息 `Error: Unable to access jarfile hbase-manager-admin-2.0.9.jar` 表示 Java 无法找到或访问指定的 JAR 文件。以下是逐步排查和解决的建议: --- ### **1. 检查文件名和路径** - **现象分析**: 当前目录是 `hbase-manager-2.0.8-hbase-2.x`,但尝试运行的 JAR 文件版本为 `2.0.9`,可能存在文件名或路径不匹配。 - **操作步骤**: 在终端输入以下命令,确认 JAR 文件是否存在: ```bash ls -l hbase-manager-admin-*.jar ``` - 如果输出为空,说明文件不存在。 - 如果文件名是 `hbase-manager-admin-2.0.8.jar`,需修改命令中的版本号。 --- ### **2. 确认当前工作目录** - **现象分析**: 错误可能源于未在 JAR 文件所在目录下执行命令。 - **操作步骤**: 输入 `pwd` 确认当前目录是否为 `~/software/hbase-manager-2.0.8-hbase-2.x`。 如果不是,需切换到正确目录: ```bash cd ~/software/hbase-manager-2.0.8-hbase-2.x ``` --- ### **3. 检查文件权限** - **现象分析**: 如果 JAR 文件权限不足,Java 无法读取。 - **操作步骤**: 赋予文件可读权限: ```bash chmod +r hbase-manager-admin-2.0.9.jar ``` --- ### **4. 验证文件完整性** - **现象分析**: 文件可能因下载不完整或损坏导致无法访问。 - **操作步骤**: 重新下载 JAR 文件,或通过校验哈希值(如 MD5/SHA1)验证文件完整性。 --- ### **5. 指定绝对路径运行(备用方案)** 如果上述步骤无效,可尝试直接指定 JAR 文件的绝对路径: ```bash java -jar ~/software/hbase-manager-2.0.8-hbase-2.x/hbase-manager-admin-2.0.9.jar ``` --- ### **总结** 常见原因优先级排序: 1. **文件名或路径错误**(如版本号 `2.0.8` vs `2.0.9`) 2. **文件未正确下载或缺失** 3. **权限不足** 请按顺序排查,通常可解决问题。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值