Java 配合 mitmproxy HTTPS 抓包调试

存储架构 2017-03-25

今天对接接口,对方给的 Demo 和已有项目用的 HTTP 工具不是一个;后来出现人家的好使,我的死活不通的情况;无奈之下开始研究 Java 抓包,所以怕忘了记录一下……

一、mitmproxy 简介

mitmproxy 是一个命令行下的强大抓包工具,可以在命令行下抓取 HTTP(S) 数据包并加以分析;对于 HTTPS 抓包,首先要在本地添加 mitmproxy 的根证书,然后 mitmproxy 通过以下方式进行抓包:

  • 1、客户端发起一个到 mitmproxy 的连接,并且发出HTTP CONNECT 请求
  • 2、mitmproxy作出响应(200),模拟已经建立了CONNECT通信管道
  • 3、客户端确信它正在和远端服务器会话,然后启动SSL连接。在SSL连接中指明了它正在连接的主机名(SNI)
  • 4、mitmproxy连接服务器,然后使用客户端发出的SNI指示的主机名建立SSL连接
  • 5、服务器以匹配的SSL证书作出响应,这个SSL证书里包含生成的拦截证书所必须的通用名(CN)和服务器备用名(SAN)
  • 6、mitmproxy生成拦截证书,然后继续进行与第3步暂停的客户端SSL握手
  • 7、客户端通过已经建立的SSL连接发送请求,
  • 8、mitmproxy通过第4步建立的SSL连接传递这个请求给服务器

二、抓包配置

2.1、安装 mitmproxy

mitmproxy 是由 python 编写的,所以直接通过 pip 即可安装,mac 下也可使用 brew 工具安装

# mac
brew install mitmproxy
# Linux
pip install mitmproxy
# CentOS 安装时可能会出现 "致命错误:libxml/xmlversion.h:没有那个文件或目录"
# 需要安装如下软件包即可解决
yum install libxml2 libxml2-devel libxslt libxslt-devel -y

2.2、HTTPS 证书配置

首先由于 HTTPS 的安全性,直接抓包是什么也看不到的;所以需要先在本地配置 mitmproxy 的根证书,使其能够解密 HTTPS 流量完成一个中间人的角色;证书下载方式需要先在本地启动 mitmproxy,然后通过设置本地连接代理到 mitmproxy 端口,访问 mitm.it 即可,具体可查看 官方文档

首先启动 mitmproxy

mitmproxy -p 4000 --no-mouse

浏览器通过设置代理访问 mitm.it

选择对应平台并将其证书加入到系统信任根证书列表即可;对于 Java 程序来说可能有时候并不会生效,所以必须 修改 keystore ,修改如下

# Linux 一般在 JAVA_HOME/jre/lib/security/cacerts 下
# Mac 在 /Library/Java/JavaVirtualMachines/JAVA_HOME/Contents/Home/jre/lib/security/cacerts
sudo keytool -importcert -alias mitmproxy -keystore /Library/Java/JavaVirtualMachines/jdk1.8.0_77.jdk/Contents/Home/jre/lib/security/cacerts -storepass changeit -trustcacerts -file ~/.mitmproxy/mitmproxy-ca-cert.pem

2.4、Java 抓包调试

JVM 本身在启动时就可以设置代理参数,也可以通过代码层设置;以下为代码层设置代理方式

public void beforeTest(){
    logger.info("设置抓包代理......");
    System.setProperty("https.proxyHost", "127.0.0.1");
    System.setProperty("https.proxyPort", "4000");
}

然后保证在发送 HTTPS 请求之前此代码执行即可,以下为抓包示例

通过方向键+回车即可选择某个请求查看报文信息

三、Java 其他代理设置

Java 代理一般可以通过 2 种方式设置,一种是通过代码层,如下

// HTTP 代理,只能代理 HTTP 请求
System.setProperty("http.proxyHost", "127.0.0.1");
System.setProperty("http.proxyPort", "9876");
 
// HTTPS 代理,只能代理 HTTPS 请求
System.setProperty("https.proxyHost", "127.0.0.1");
System.setProperty("https.proxyPort", "9876");

// 同时支持代理 HTTP/HTTPS 请求
System.setProperty("proxyHost", "127.0.0.1");
System.setProperty("proxyPort", "9876");
 
// SOCKS 代理,支持 HTTP 和 HTTPS 请求
// 注意:如果设置了 SOCKS 代理就不要设 HTTP/HTTPS 代理
System.setProperty("socksProxyHost", "127.0.0.1");
System.setProperty("socksProxyPort", "1080");

另一种还可以通过 JVM 启动参数设置

-DproxyHost=127.0.0.1 -DproxyPort=9876

本文参考:

转载请注明出处,本文采用 CC4.0 协议授权

您可能感兴趣的

Java面试题-基础篇二 11、是否可以从一个static方法内部发出对非static方法的调用? 不可以。因为非static方法是要与对象关联在一起的,必须创建一个对象后,才可以在该对象上进行方法调用,而static方法调用时不需要创建对象,可以直接调用。也就是说,当一个static方法被调用时,可能还没有创建任何实例...
MPS教程(五)把之前的语言嵌入Java 原文 突然MPS教程(五),扩展Java 爱看不看 话说我一开始时就是抱着肯定没人看的心情写的这个系列, 不过写了之后居然还是有不少人向我反馈表示在看,我还是很开心的。 知乎有一哥们私聊找我,问我能不能用MPS扩展其他语言。答案当然是可以的,不过我的教程里面似乎还没有, ...
类初始化顺序 前些日至写代码的时候又碰到一个问题,类似于这样: image.png 子类调用父类的构造器,传入自身的非静态成员变量,编译器会报错 依稀记得以前整理过,所以又去写了一遍相关的测试,代码如下: public class Child extends...
使用java实现阿里云消息队列简单封装 一、前言 最近公司有使用阿里云消息队列的需求,为了更加方便使用,本人用了几天时间将消息队列封装成api调用方式以方便内部系统的调用,现在已经完成,特此记录其中过程和使用到的相关技术,与君共勉。 现在阿里云提供了两种消息服务:mns服务和ons服务,其中我认为mns是简化版的ons,而且mns...
技术上难分高下,为什么市场选择了Java?... 编程语言之争由来已久,每次争锋都逃不出两个结果,一个是双方争执不下,谁也不服谁,另一个就是“不以使用场景来谈论编程语言”都是耍流氓。所以,这一次我们不再单纯的谈论C#和Java谁强谁弱,而是从多个角度来看市场为什么选择了Java。 虽然Java每个月都会出几篇“阵亡”或者“准备阵亡”的报道,但是...
0
漠然

责编内容来自:漠然 (本文源链)
阅读提示:酷辣虫无法对本内容的真实性提供任何保证,请自行验证并承担相关的风险与后果!
本站遵循[CC BY-NC-SA 4.0]。如您有版权、意见投诉等问题,请通过eMail联系我们处理。