htmlparser 假死问题

本文分享了在使用HTMLParser分析网页过程中遇到的假死问题及其解决方案。通过调整网络请求方式,设置合理的连接和读取超时时间,有效避免了程序停滞不前的情况。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

前几天,在用htmlparser分析页面时,遇到一个郁闷的问题,在爬取得时候,htmlparser停住啦,当时没报任何的错误。我以为多等一会它就会报一个异常啦,结果,等了一个上午,还是停在那里不动。实在等不下去啦,直接看它的源代码,原来是获取数据的时候,获取到一半,停在那里,我找不到在哪里修改它的代码,结果是我不用htmlparser进行连接下载数据,而htmlparser单纯是用于分析页面。我链接那部分是用

            url1 = new URL(url);
            URLConnection urlcon = url1.openConnection();
            urlcon.setConnectTimeout(6000);
            urlcon.setReadTimeout(6000);
            urlcon.connect();

设置了连接超时和读取数据超时。

经过这样整,就可以把我的htmlparser假死问题解决掉啦

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值