Remote Communication Kit构建了一种场景化HTTP通信能力,HTTP请求失败是网络通信中常见问题,请求失败后通常会使用日志打印的方式用于问题分析定位,常见的日志打印示例如下所示,那么如何能根据日志信息高效定位网络请求失败问题?
Rcp {"code":errCode,"data":"errInfo xxx","extendInfo":{"httpPhase":"111100","dnsDur":"76.30","tcpDur":"30.96","tlsDur":"55.88","sndDur":"0.17","rcvDur":"0.00","totDur":"195.18","redDur":"0.00","sptIP6":"0","proxyType":"none","srcAddr":"192.168.**.**","srcPort":"54842","dstAddr":"218.77.***.*","dstPort":"443","sock":"168"}} 一次完整的HTTPS请求过程如下图所示,包括构造网络请求、DNS解析、TCP握手、TLS握手、发送HTTP请求、服务器处理并生成响应、客户端接收响应数据、TCP四次挥手。

RCP模块中Request的参数包含请求地址、请求方法、请求头、请求内容、请求cookie等,通过请求参数的设置来构造网络请求。
DNS(Domain Name System,域名系统)是将域名转换为IP地址。DNS解析的基本原理是通过分布式的层级结构,将域名逐层解析为IP地址。这个过程涉及多个DNS服务器的协同工作,其解析步骤如上图所示。
TCP(传输控制协议)通过三次握手(Three-way Handshake)在客户端和服务器之间建立可靠的连接。其主要目的是确认双方的接收和发送能力均正常。
TLS握手是HTTPS建立安全连接的核心过程,其目标是在客户端和服务器之间建立共享的会话密钥,并验证双方的身份。详细步骤如上图所示。
客户端将HTTP请求(如GET/index.html用会话密钥加密(对称加密,如AES)),通过已建立的TCP连接发送给服务器。
服务器用相同的会话密钥解密,处理请求后,将响应数据(如HTML页面)加密后返回。
客户端收到响应数据后,解密响应数据。
通信完成后,TCP四次挥手断开TCP连接,具体过程为客户端发送请求关闭连接,服务器发送确认收到关闭请求,服务器发送消息告知客户端数据发送完成,客户端发送消息确认关闭释放连接。
关键字段httpPhase,httpPhase是6位由1或者0组成的数字,如11,按位表示当前执行到的阶段,当前将HTTP执行拆分为dns、tcp、tls、send、rcv、body共6个阶段,每个阶段开始执行时将对应位置置1。
下表是httpPhase所有可能的值与含义。
dns | tcp | tls | snd | rcv | bdy | httpPhase值 | 含义 |
|---|---|---|---|---|---|---|---|
1 | 1 | 1 | 1 | 1 | 1 | 111111 | HTTPS进行到接收响应体阶段 |
1 | 1 | 1 | 1 | 1 | 0 | 111110 | HTTPS进行到接收响应头阶段 |
1 | 1 | 1 | 1 | 0 | 0 | 111100 | HTTPS进行到发送请求阶段 |
1 | 1 | 1 | 0 | 0 | 0 | 111000 | HTTPS进行到TLS阶段 |
1 | 1 | 0 | 0 | 0 | 0 | 110000 | HTTPS进行到TCP阶段 |
1 | 0 | 0 | 0 | 0 | 0 | 100000 | HTTPS进行到DNS阶段 |
当出现DNS来自缓存,而非来自查询时,会出现DNS位为0的情况,如下所示。
dns | tcp | tls | snd | rcv | bdy | httpPhase值 | 含义 |
|---|---|---|---|---|---|---|---|
0 | 1 | 1 | 1 | 1 | 1 | 011111 | (DNS来自缓存)HTTPS进行到接收响应体阶段 |
0 | 1 | 1 | 1 | 1 | 0 | 011110 | (DNS来自缓存)HTTPS进行到接收响应头阶段 |
0 | 1 | 1 | 1 | 0 | 0 | 011100 | (DNS来自缓存)HTTPS进行到发送请求阶段 |
0 | 1 | 1 | 0 | 0 | 0 | 011000 | (DNS来自缓存)HTTPS进行到TLS阶段 |
0 | 1 | 0 | 0 | 0 | 0 | 010000 | (DNS来自缓存)HTTPS进行到TCP阶段 |
当出现链接复用时,会出现tcp、tls为0的情况,如下所示。
dns | tcp | tls | snd | rcv | bdy | httpPhase值 | 含义 |
|---|---|---|---|---|---|---|---|
0 | 0 | 0 | 1 | 1 | 1 | 000111 | (连接复用)HTTPS进行到接收响应体阶段 |
0 | 0 | 0 | 1 | 1 | 0 | 000110 | (连接复用)HTTPS进行到接收响应头阶段 |
0 | 0 | 0 | 1 | 0 | 0 | 000100 | (连接复用)HTTPS进行到发送请求阶段 |
1 | 0 | 0 | 1 | 1 | 1 | 100111 | (连接复用)HTTPS进行到接收响应体阶段 |
1 | 0 | 0 | 1 | 1 | 0 | 100110 | (连接复用)HTTPS进行到接收响应头阶段 |
1 | 0 | 0 | 1 | 0 | 0 | 100100 | (连接复用)HTTPS进行到发送请求阶段 |
故障 | 日志定位 | 典型场景问题 | 排查方法 |
|---|---|---|---|
DNS服务器异常 | connDns为连接的DNS服务器列表,字段全为"0",表示所有服务器连接失败,tryDns为尝试连接的服务器列表。 | 网络不通 | 其他设备连接同一网络环境后确认是否可以成功DNS服务器 |
DNS服务器无响应 | connDns的DNS服务器与recvDns中的DNS服务器无法对应,表示有服务器没有返回DNS结果。 | 网络管理给的DNS服务器不响应 | 排查DNS服务器配置,生成响应处理逻辑 |
DNS结果响应异常 | dnsStatus为1表示有IP地址,2表示只拿到CNAME,3表示非法报文。 | 2在重定向场景无异常,3表示域名解析为非法IP地址 | 排查域名是否正确,DNS自定义规则是否正确 |
故障 | 日志定位 | 典型场景问题 | 排查方法 |
|---|---|---|---|
TCP握手失败 | tryConnIp和tryConnPort分别为尝试连接的IP地址和端口。osErr为socket上发生的错误码与POSIX错误码一致。 | 目标IP网络不通或者服务器异常 | ping目标IP地址及其端口,排查目标服务器网络连通性 |
故障 | 日志定位 | 典型场景问题 | 排查方法 |
|---|---|---|---|
TCP流异常 | sslConnE非0。 | 网络切换、中断 | 查询osErr错误码分析原因 |
拒绝TLS连接 | sslConnE为0,ciphers为调用方设置的加密套件或者默认的加密套件,minTlsVersion和maxTlsVersion调用方设置的最小和最大TLS版本或者默认的最小和最大TLS版本。 | 证书的版本以及加密套件不匹配 | 检查证书的版本以及加密套件等 |
故障 | 日志定位 | 典型场景问题 | 排查方法 |
|---|---|---|---|
传输超时 | dlSpeed下载速率,ulSpeed上传速率,lastPollinTime最近一次RCP尝试接收数据的时间,lastOsPollinTime最近一次内核通知RCP有数据的时间,lastPolloutTime最近一次RCP尝试发数据的时间,lastOsPolloutTime最近一次内核通知RCP有数据的时间。 | 弱网环境导致丢包重传乱序等问题 | 检查是否为弱网环境,尝试设置增加超时时间检查是否可以解决问题 |
rcp接收服务器响应流写入文件时响应超时 | transferMs参数数据传输默认值为60000,传输文件超过60S后报错Timeout was reached,响应超时。 | 参数值未满足写入文件所需的时间 | 配置HTTP请求的transferMs参数值,允许开发者定义连接和传输数据所允许的最长时间 |