本文探讨了为何服务接口在不同环境下响应结果存在差异，主要聚焦于Android应用使用HttpURLConnection请求接口时与浏览器请求的不同。问题分析揭示，关键在于Header中的User-Agent设置。配置User-Agent为空字符串后，Android应用得到了与浏览器一致的正确结果。了解User Agent的含义和其在接口请求中的作用，有助于解决类似问题。
为什么有些服务接口在不同环境下请求获得的结果不同
一、前言
最近有人问我，说在开发Android项目过程中使用Android的网络请求工具HttpURLConnection调用一个接口，请求的参数相同的情况下，结果返回的与浏览器中直接访问该接口的数据截然不同。
二、问题分析
经过与他的详细沟通，得出他给出的下列几条信息：
- 请求接口的地址：http://ip.taobao.com/service/getIpInfo.php?ip=myip
- 请求使用的方法：GET、POST
- 请求配置的Header、Query、Body完全一致；
- 能够得到正确结果的方式：浏览器直接访问、接口测试服务网站（如http://coolaf.com/、https://apizza.net）等等
- 无法得到正确结果的方式：Android的HttpURLConnection、Okhttp框架等等代码编译方式访问。
获得上述几条信息后，我首先按其所述进行逐一验证情况是否属实。再根据每次验证情况进行更进一步的分析。
- 首先根据提供的请求地址，我使用计算机的谷歌、火狐、360浏览器直接输入URL方式进行访问，皆获得了正确的结果。
- 随后根据他本人提供的代码，使用Android的HttpURLConnection进行访问相同地址，未获得正确的结果。
//关键代码
HttpURLConnection connection=null;
BufferedReader reader=null;
try {
String urlStr = "http://ip.taobao.com/service/getIpInfo.php?ip=myip";
URL url = new URL(urlStr);
connection = (HttpURLConnection) url.openConnection();
connection.setRequestMethod("GET");
connection.connect();
int responseCode = connection.getResponseCode();
if(responseCode == HttpURLConnection.HTTP_OK){
InputStream in = connection.getInputStream();
reader = new BufferedReader(new InputStreamReader(in));
StringBuilder response = new StringBuilder();
String line;
while ((line = reader.readLine())!= null) {
response.append(line);
}
emitter.onNext(response.toString());
emitter.onComplete();
}
} catch (Exception e) {
emitter.onComplete();
}finally {
if (reader != null) {
try {
reader.close();
} catch (IOException e ) {
e.printStackTrace();
}
}
if ( connection!= null) {
connection.disconnect();
}
}
打印日志结果：
第一次分析：代码层次并未进行多余的Header、Query、Body配置，URL都是地址访问的都是相同的http://ip.taobao.com/service/getIpInfo.php?ip=myip，观察到URL中包含“ip=myip”请求Query，疑似表示当前访问客户端的IP地址。
因此得到新的猜测：是否由于Android设备访问接口IP与计算机浏览器访问IP不同结果才不同？
根据新猜测，进行第3次验证。
- 使用Android的HttpURLConnection进行访问，将““ip=myip””变更为拿到了正确结果的计算机IP，任然未获得正确的结果。
//关键代码
HttpURLConnection connection=null;
BufferedReader reader=null;
try {
String urlStr = "http://ip.taobao.com/service/getIpInfo.php?ip=36.**.**.**";
URL url = new URL(urlStr);
connection = (HttpURLConnection) url.openConnection();
connection.setRequestMethod("GET");
connection.connect();
.......
打印日志结果：
第二次分析：URL中包含“ip=myip”固定IP，但结果任然不同。根据掌握的Http请求相关知识点，导致这种情况的唯一可能性是参数不同，但是代码中未对请求Header、Query、Body进行配置。
因此得到新的猜测：是否计算机浏览器使用的网络框架与Android的HttpURLConnection请求框架默认封装了一些Header配置参数不同导致结果不同？
根据新猜测，进行第4次验证。
- 使用抓包工具Charles，针对计算机浏览器请求、Android的HttpURLConnection请求分别进行抓包。
浏览器请求抓包结果：
Android的HttpURLConnection抓包结果：
第三次分析：抓包结果证明，计算机浏览器使用的网络框架与Android的HttpURLConnection请求框架默认封装了一些Header配置参数确实有所不同。但最终我们希望弄清楚到底是什么配置最终导致了结果不同。
根据第三次分析结果，使用Charles不断尝试修改HttpURLConnection请求中的默认Header配置参数，最终发现在修改了User-Agent配置后，得到了正确的反馈结果。
三、问题结论
根据问题分析与验证，最终得出该接口之所以在不同环境下访问结果不同，是由于Header请求配置User-Agent不同导致。
根据结论我们进行最终验证，使用Android的HttpURLConnection进行访问，并配置User-Agent为空字符串，得到了正确结果。
//关键代码
HttpURLConnection connection=null;
BufferedReader reader=null;
try {
String urlStr = "http://ip.taobao.com/service/getIpInfo.php?ip=36.**.**.**";
URL url = new URL(urlStr);
connection = (HttpURLConnection) url.openConnection();
connection.setRequestProperty("User-Agent","");
connection.setRequestMethod("GET");
connection.connect();
.......
打印日志结果：
四、User Agent含义
事情到这就结束了么？如果你这样想，你又失去了一次进步的机会。我们还要弄清楚什么是User Agent，为什么它会影响接口的结果。我们要在发现的问题中学习总结新的知识与经验，不断的积累才能让你不断的进步。
下列解释来源于网络：
User Agent中文名为用户代理，简称 UA，它是一个特殊字符串头，使得服务器能够识别客户使用的操作系统及版本、CPU 类型、浏览器及版本、浏览器渲染引擎、浏览器语言、浏览器插件等。
一些网站常常通过判断 UA 来给不同的操作系统、不同的浏览器发送不同的页面，因此可能造成某些页面无法在某个浏览器中正常显示，但通过伪装 UA 可以绕过检测。
标准格式为： 浏览器标识 (操作系统标识; 加密等级标识; 浏览器语言) 渲染引擎标识 版本信息
由于很多网站在进行 UA 检测的时候忽略了两位数版本号，所以可能造成 浏览器及之后版本收到糟糕的页面，因此自 浏览器 10 之后的版本中浏览器标识项固定为 浏览器，在 UA 字串尾部添加真实版本信息。
详细说明：用户代理 User Agent
五、总结经验
- 遇到问题先把问题了解清晰，其次根据问题逐步分析并加以验证。验证的过程中不断去提出新的猜想，再逐步验证，直到弄清问题的根本原因为止。
- 问题的结果往往不重要，重要的是在过程中你学习到了什么。
- 你是否真的理解什么是TCP/IP？什么是HTTP？什么是HTTPS？什么是Socket?如果不是，快去学习，就现在。
- 你是否会使用常用的抓包工具？如Charles、Fiddler，如果如果不是，快去学习，就现在。
你是否遇到过相同的问题？在评论中留下你碰到的场景，如系统环境、语言环境、工具类、User Agent默认内容等等。
愿你们生活如意！事业高升！前程似锦！美梦成真！
扫一扫
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
