java java.net.InetAddress.getLocalHost阻塞导致数据库连接池无可用连接

线上Tomcat服务因数据库连接池满而出现问题,排查后发现并非SQL语句导致。通过jstack分析发现BLOCKED线程与InetAddress.getLocalHost()相关。尝试解决方案一-Djava.net.preferIPv4Stack=true无效,然后调整Linux hosts文件,将localhost相关记录优化,服务恢复正常。问题解决关键在于正确配置hosts。

背景:线上Tomcat服务启动后很快出现数据库连接池已满未可用连接,第一感觉是因为SQL语句性能问题导致的堵塞,经排查Oracle数据库不存在阻塞信息异常。于是就有了通过java堆栈分析阻塞的过程。具体步骤如下,

step 1 :使用jstack生成堆栈信息

jstack -l pid > 1.log

step2:分析BLOCKED线程

定位BLOCKED线程:

"pool-4-thread-1" prio=10 tid=0x000000004882c800 nid=0x532 waiting for monitor entry [0x00000000430cf000]
   java.lang.Thread.State: BLOCKED (on object monitor)
	at
25/06/23 08:39:54 ERROR StaticHostProvider: Unable to resolve address: hh2:2181 java.net.UnknownHostException: hh2 at java.net.Inet6AddressImpl.lookupAllHostAddr(Native Method) at java.net.InetAddress$2.lookupAllHostAddr(InetAddress.java:867) at java.net.InetAddress.getAddressesFromNameService(InetAddress.java:1302) at java.net.InetAddress$NameServiceAddresses.get(InetAddress.java:815) at java.net.InetAddress.getAllByName0(InetAddress.java:1291) at java.net.InetAddress.getAllByName(InetAddress.java:1144) at java.net.InetAddress.getAllByName(InetAddress.java:1065) at org.apache.zookeeper.client.StaticHostProvider$1.getAllByName(StaticHostProvider.java:88) at org.apache.zookeeper.client.StaticHostProvider.resolve(StaticHostProvider.java:141) at org.apache.zookeeper.client.StaticHostProvider.next(StaticHostProvider.java:368) at org.apache.zookeeper.ClientCnxn$SendThread.run(ClientCnxn.java:1193) 25/06/23 08:39:57 ERROR StaticHostProvider: Unable to resolve address: hh3:2181 java.net.UnknownHostException: hh3 at java.net.Inet6AddressImpl.lookupAllHostAddr(Native Method) at java.net.InetAddress$2.lookupAllHostAddr(InetAddress.java:867) at java.net.InetAddress.getAddressesFromNameService(InetAddress.java:1302) at java.net.InetAddress$NameServiceAddresses.get(InetAddress.java:815) at java.net.InetAddress.getAllByName0(InetAddress.java:1291) at java.net.InetAddress.getAllByName(InetAddress.java:1144) at java.net.InetAddress.getAllByName(InetAddress.java:1065) at org.apache.zookeeper.client.StaticHostProvider$1.getAllByName(StaticHostProvider.java:88) at org.apache.zookeeper.client.StaticHostProvider.resolve(StaticHostProvider.java:141) at org.apache.zookeeper.client.StaticHostProvider.next(StaticHostProvider.java:368) at org.apache.zookeeper.ClientCnxn$SendThread.run(ClientCnxn.java:1193) 25/06/23 08:40:00 ERROR StaticHostProvider: Unable to resolve address: hh1:2181 java.net.UnknownHostException: hh1 at java.net.Inet6AddressImpl.lookupAllHostAddr(Native Method) at java.net.InetAddress$2.lookupAllHostAddr(InetAddress.java:867) at java.net.InetAddress.getAddressesFromNameService(InetAddress.java:1302) at java.net.InetAddress$NameServiceAddresses.get(InetAddress.java:815) at java.net.InetAddress.getAllByName0(InetAddress.java:1291) at java.net.InetAddress.getAllByName(InetAddress.java:1144) at java.net.InetAddress.getAllByName(InetAddress.java:1065) at org.apache.zookeeper.client.StaticHostProvider$1.getAllByName(StaticHostProvider.java:88) at org.apache.zookeeper.client.StaticHostProvider.resolve(StaticHostProvider.java:141) at org.apache.zookeeper.client.StaticHostProvider.next(StaticHostProvider.java:368) at org.apache.zookeeper.ClientCnxn$SendThread.run(ClientCnxn.java:1193) 25/06/23 08:40:01 ERROR StaticHostProvider: Unable to resolve address: hh2:2181
06-24
### 解决 Spark 向 HBase 传输数据时出现的主机名无法解析问题 在 Spark 向 HBase 传输数据时,`java.net.UnknownHostException` 通常表示系统无法解析某些主机名。这可能是由于 DNS 配置、`/etc/hosts` 文件配置不正确或 ZooKeeper 配置错误导致的[^1]。 以下是一些关键点和解决方案: #### 1. 检查 `/etc/hosts` 文件 确保所有节点(包括 Spark 和 HBase 节点)的 `/etc/hosts` 文件中正确配置了主机名与 IP 地址的映射。例如: ```plaintext 192.168.1.102 hh1 192.168.1.103 hh2 192.168.1.104 hh3 ``` 如果 `/etc/hosts` 文件中缺少某些主机名或 IP 地址,可能会导致 `UnknownHostException`。此外,确保文件中的条目没有拼写错误或多余的空格[^2]。 #### 2. 验证 DNS 配置 如果未使用 `/etc/hosts` 文件进行静态解析,则需要确保 DNS 配置正确。可以通过以下命令测试主机名解析: ```bash nslookup hh1 nslookup hh2 nslookup hh3 ``` 如果这些命令返回错误或无法解析主机名,则需要检查 DNS 配置或添加静态解析规则到 `/etc/hosts` 文件中[^3]。 #### 3. 检查 HBase 和 ZooKeeper 配置 HBase 的配置文件(如 `hbase-site.xml` 和 `zoo.cfg`)需要正确设置 ZooKeeper 的地址。例如,在 `hbase-site.xml` 中: ```xml <property> <name>hbase.zookeeper.quorum</name> <value>hh1,hh2,hh3</value> </property> ``` 确保 `hbase.zookeeper.quorum` 中列出的主机名能够被正确解析。如果使用的是 IP 地址而不是主机名,则可以避免主机名解析问题[^1]。 #### 4. 验证 ZooKeeper 中的元数据 通过 ZooKeeper 客户端检查 `/hbase/meta-region-server` 节点的内容: ```bash [zk: localhost:2181(CONNECTED) 1] get /hbase/meta-region-server ``` 输出应包含正确的 RegionServer 地址。如果发现地址为错误的主机名(如 `hadoop1`),则需要检查 HBase 的启动日志以确定问题来源。 #### 5. 检查 Spark 配置 在 Spark 的配置文件(如 `spark-defaults.conf`)中,确保设置了正确的 HBase 配置。例如: ```properties spark.hadoop.hbase.zookeeper.quorum=hh1,hh2,hh3 spark.hadoop.hbase.zookeeper.property.clientPort=2181 ``` 如果 Spark 使用的是动态分配的主机名(如 `hadoop1`),则需要确保这些主机名能够被正确解析[^3]。 #### 6. 测试连接 在 Spark 程序中,可以通过以下代码测试 HBase 连接: ```python from happybase import Connection connection = Connection('hh1', port=9090, timeout=None) table = connection.table('test_table') print(table.name.decode('utf-8')) ``` 如果仍然出现 `UnknownHostException`,则需要逐一排查上述配置项。 --- ###
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值