Fiddler Everywhere抓包实战：解密MP4与M3U8视频流下载

1. 项目概述：当Fiddler Everywhere遇上视频流

作为一名常年和网络数据打交道的开发者，我处理过无数与数据抓取、协议分析相关的需求。其中，“如何下载网页或App里的视频”是一个历久弥新的话题。无论是为了素材存档、离线学习，还是单纯想保存某个精彩的瞬间，绕过前端限制直接获取视频源文件，总比录屏要高效和清晰得多。今天，我们就来深入聊聊如何利用Fiddler Everywhere这款现代化的抓包工具，精准定位并下载网络视频，特别是对付如今主流的MP4直链和M3U8流媒体协议。

Fiddler Everywhere 可以看作是经典 Fiddler 的跨平台重生版，界面更清爽，对 HTTPS 流量解密也更友好。它的核心原理是作为一个“中间人”（Man-in-the-Middle），接管你设备发出的所有 HTTP/HTTPS 请求，让你能清晰地看到每一个网络请求的来龙去脉。视频，无论是 MP4 文件还是 M3U8 播放列表，本质上都是通过 HTTP 协议传输的数据包。我们的目标，就是在这纷繁的数据流中，找到承载视频内容的那个“真身”。

这个方法适合谁？前端开发者、测试工程师、对网络技术感兴趣的内容创作者，或者任何不想被平台下载限制束缚的普通用户。它不依赖任何特定的网站或 App 插件，是一种通用的、基于协议分析的“降维打击”思路。接下来，我会从环境配置、核心抓包技巧、针对不同视频格式（MP4/M3U8）的实战策略，到后期可能遇到的问题排查，为你完整拆解这个过程。

2. 核心思路与工具准备：搭建你的数据监听站

在开始“抓捕”视频之前，我们必须把“监听站”——也就是 Fiddler Everywhere 的环境搭建好。这个过程的核心是建立信任，让你的设备（无论是电脑还是手机）愿意将所有网络流量放心地交给 Fiddler 来检查和转发。

2.1 Fiddler Everywhere 基础配置与HTTPS解密

首先，从官网下载并安装 Fiddler Everywhere。启动后，你需要完成几个关键设置：

1. 启用HTTPS解密：这是抓取现代应用流量的基石。在设置（Settings）中找到HTTPS选项卡，勾选“Decrypt HTTPS traffic”。这时，Fiddler 会生成一个独有的根证书（Root Certificate）。
2. 安装根证书到系统信任库：点击“Trust root certificate”按钮。对于 macOS 或 Linux，可能需要手动将证书导出并导入到系统钥匙串或证书管理器，并始终信任。这一步至关重要，否则你看到的 HTTPS 流量全是乱码。
3. 配置监听端口与远程连接：在Connections选项卡，记住默认的监听端口（通常是 8866）。确保“Allow remote computers to connect”是勾选状态，这样手机或其他设备才能连接过来。

注意：安装根证书时，系统可能会弹出安全警告，这是因为你正在手动添加一个证书颁发机构。请确认此操作是在你可控的安全环境下进行，并且仅用于个人学习和调试目的。完成后，在 Fiddler 中你可以看到所有进出你电脑的 HTTPS 请求和响应的明文内容。

2.2 代理配置：将移动设备纳入监控网

很多视频内容在手机 App 或微信小程序里，因此配置移动端抓包是必备技能。

1. 确保电脑与手机在同一局域网：让手机和运行 Fiddler 的电脑连接同一个 Wi-Fi。
2. 查询电脑的局域网IP地址：在 Fiddler 右上角或系统网络设置中查看，例如192.168.1.100。
3. 在手机上配置代理：进入手机 Wi-Fi 设置，修改当前网络的代理为“手动”，服务器主机名填写电脑的 IP（如192.168.1.100），端口填写 Fiddler 的监听端口（如8866）。
4. 在手机浏览器安装证书：用手机浏览器访问http://电脑IP:端口，例如http://192.168.1.100:8866。你会看到一个 Fiddler 的页面，点击“FiddlerRoot certificate”链接下载并安装证书。在 iOS 上，安装后还需进入“设置 > 通用 > 关于本机 > 证书信任设置”，完全信任此根证书。

配置成功后，你手机上的网络请求就会出现在 Fiddler Everywhere 的会话列表（Session List）中了。对于模拟器（如 MuMu），原理相同，通常在模拟器的网络设置中配置代理即可。

2.3 抓包前的过滤策略：从噪音中寻找目标

如果不加过滤，Fiddler 会捕获所有请求，信息流会瞬间爆炸。我们需要设置过滤器来聚焦目标。

• 按进程过滤：如果你只在电脑浏览器上操作，可以在 Fiddler 的“Filters”面板，选择“Show only traffic from”并指定浏览器进程。
• 按主机名过滤：这是最常用的方法。在过滤器中设置“Hosts”，包含（Include）你知道的视频域名，例如*.bilibili.com，*.ixigua.com等。这样可以屏蔽大量广告、统计等无关请求。
• 按内容类型过滤：视频请求的响应（Response）头部通常包含Content-Type。我们可以利用 Fiddler 的“Request Headers”或“Response Headers”过滤器，包含video/或application/vnd.apple.mpegurl（M3U8类型）。

我的习惯是，先宽后窄。开始抓包时，可以先不过滤，在目标视频开始播放后，迅速在会话列表中根据文件大小（Size）排序，通常视频文件的大小会远大于其他资源。找到疑似目标后，再根据其域名或特征添加精确过滤。

3. 实战抓包：定位MP4与M3U8的踪迹

环境就绪，过滤器设好，现在可以开始实战了。我们分两种最常见的情况来讨论。

3.1 案例一：直接下载MP4文件

这是最简单的情况。视频网站直接提供了一个完整的.mp4文件链接。

1. 清空会话列表，开始录制：在 Fiddler 中点击左下角的“Capturing”按钮确保抓包开启，然后清空当前所有会话。
2. 触发视频播放：在网页或 App 中播放目标视频。如果是网页，可以尝试打开浏览器开发者工具（F12）的 Network 标签，配合使用，但 Fiddler 的优势在于可以捕获所有进程的流量。
3. 在会话列表中寻找线索：
   • 看类型（Type）：寻找video/mp4。
   • 看大小（Size）：视频文件通常有几MB甚至几百MB，在列表中非常显眼。
   • 看域名：视频资源可能来自专门的 CDN 域名，如*.cloudfront.net,*.akamaihd.net等。
   • 看URL路径：URL 中常包含video,mp4,hd,1080等关键词。
4. 定位与下载：找到疑似请求后，右键点击它，选择“Copy > Copy Link Address”即可获得直链。将这个链接粘贴到浏览器地址栏，或者使用下载工具（如curl、wget或迅雷）即可直接下载。

   # 例如在终端中使用 curl 下载 curl -O "https://example.com/path/to/video.mp4"

实操心得：有些网站会对 MP4 链接进行鉴权，比如在 URL 里加入有时效性的 token（例如?token=xxxxxx）。直接复制的链接可能过几分钟就失效了。因此，最好在获取链接后尽快开始下载。另外，一些网站采用分片传输，这时你看到的可能不是单个大 MP4，而是多个.ts或.m4s文件，这就引出了第二种更复杂的情况。

3.2 案例二：破解M3U8流媒体协议

如今，为了适配不同网速和实现动态加密，HLS（HTTP Live Streaming）协议已成为主流，其核心就是M3U8播放列表文件。M3U8 文件本身是个文本文件，里面记录了无数个小的.ts（Transport Stream）视频分片的地址。

1. 捕获M3U8文件：播放视频时，在 Fiddler 会话列表中寻找类型为application/vnd.apple.mpegurl或application/x-mpegURL的请求。其 URL 通常以.m3u8结尾。这就是总索引文件。
2. 分析M3U8内容：右键点击该请求，选择“Inspect > Response Body”，查看其内容。你会看到类似下面的结构：

   #EXTM3U #EXT-X-VERSION:3 #EXT-X-TARGETDURATION:10 #EXT-X-MEDIA-SEQUENCE:0 #EXTINF:10.000000, segment_000.ts #EXTINF:10.000000, segment_001.ts ...

   更复杂的情况会有多码率列表：

   #EXTM3U #EXT-X-STREAM-INF:BANDWIDTH=1500000,RESOLUTION=960x540 video_1500k.m3u8 #EXT-X-STREAM-INF:BANDWIDTH=3000000,RESOLUTION=1280x720 video_3000k.m3u8

   你需要选择其中一个码率对应的m3u8链接继续追踪。
3. 获取TS分片列表：点击上一步中找到的video_3000k.m3u8链接（可能需要再次在会话列表中寻找或手动构造请求），查看其响应体，得到最终的.ts分片列表。
4. 下载与合并：
   • 手动方式：你可以逐个复制每个.ts文件的完整 URL（注意可能是相对路径，需要拼接基础URL），用下载工具批量下载，然后使用copy /b命令（Windows）或cat命令（macOS/Linux）合并。

     # Windows (在包含所有.ts文件的目录下打开cmd) copy /b *.ts merged_video.ts # 然后可将 .ts 转换为 .mp4 ffmpeg -i merged_video.ts -c copy output.mp4 # macOS/Linux cat *.ts > merged_video.ts ffmpeg -i merged_video.ts -c copy output.mp4

   • 自动化工具（推荐）：使用ffmpeg这个神器，它可以直接处理 M3U8 链接。在终端中运行：

     ffmpeg -i "https://example.com/path/to/master.m3u8" -c copy output.mp4

     ffmpeg会自动下载所有分片并合并、转封装为 MP4，极其高效。这也是处理那些.m4s格式（B站等使用的分段MP4格式）的通用方法，同样可以用ffmpeg直接处理其对应的json或m4s索引文件。

重要提示：使用ffmpeg的-c copy参数是“流复制”，它不重新编码，所以速度极快且无损。但如果源文件有加密（#EXT-X-KEY），你需要提供密钥或使用其他方式解密，ffmpeg可能无法直接处理。这时就需要更深入的逆向分析了。

4. 进阶技巧与疑难问题排查

掌握了基本方法，我们来看看一些进阶场景和常见坑点。

4.1 应对加密与动态参数

1. 加密流（DRM）：如果在 M3U8 文件里看到#EXT-X-KEY标签，说明分片是加密的。密钥（KEY）文件可能通过另一个 URL 获取，并且该 URL 可能包含动态参数。你需要分析整个请求链，找到获取 KEY 的请求并捕获其响应（一个二进制密钥文件）。然后，可以使用ffmpeg配合-decryption_key参数指定密钥来解密下载，但这通常需要精确的十六进制密钥。
2. 防盗链与Referer：有些服务器会检查请求头中的Referer（来源页）或User-Agent（用户代理）。如果你直接用抓到的链接在浏览器新标签页打开却下载失败，可以尝试用 Fiddler 的“Composer”标签重放（Replay）这个请求，并确保携带原始的请求头。或者，使用curl下载时手动指定这些头部。

   curl -H "Referer: https://original-site.com" \ -H "User-Agent: Mozilla/5.0..." \ -O "https://video.cdn.com/file.mp4"

3. 动态Token：URL 中的token、sign、expires等参数经常变化。这意味着你抓到的链接生命周期很短。一种思路是尝试找出生成这些参数的 JavaScript 逻辑，但这涉及逆向，难度较大。更实用的方法是：在抓包的同时立即开始下载，或者编写脚本模拟整个播放请求流程。

4.2 特定平台与场景抓包要点

• 微信小程序/公众号视频：小程序环境特殊，早期版本可能忽略系统代理。需要确保 Fiddler 的根证书已正确安装并受信于系统。有时需要开启 Fiddler 的“流模式”（Streaming Mode）以实时捕获快速请求。对于更复杂的小程序，可能需要配合像 Reqable、Charles 或 Burp Suite 这类更专业的工具进行 HTTPS 双向证书绑定调试。
• 安卓模拟器（如MuMu）：确保模拟器网络设置中配置了正确的 HTTP 代理（你电脑的IP和Fiddler端口）。对于高版本安卓（如安卓15），其网络安全配置可能更严格，如果抓不到包，可以尝试在模拟器中手动安装 Fiddler 的证书文件（.cer或.pem格式）。
• App抓包失败（Unknown）：如果 Fiddler 里大量请求显示为“Tunnel to...443”或“Unknown”，说明该 App 使用了证书锁定（SSL Pinning）技术，拒绝与不受信任的中间人通信。解决此问题需要反编译 App 并修改其代码，或者使用 JustTrustMe、Frida 等框架绕过证书检查，这属于移动安全逆向的范畴，门槛较高。

4.3 常见问题速查与解决

5. 从抓包到成品：文件处理与格式转换

成功下载到视频文件后，我们可能还会遇到一些后续处理问题。

1. TS 合并后的播放问题：手动合并的.ts文件，有时用播放器打开只有声音没画面，或者无法拖拽进度条。这是因为缺少完整的容器格式信息。最佳实践是永远使用ffmpeg进行合并与转封装，而不是简单的二进制拼接。ffmpeg -i input.ts -c copy output.mp4这个命令会重建标准的 MP4 容器，解决大部分播放兼容性问题。
2. M4S 格式处理：B站等平台使用的.m4s分片，本质上是 fragmented MP4。你需要找到对应的audio.m4s和video.m4s（通常通过抓包分析json索引文件获得），然后用ffmpeg合并：

   ffmpeg -i video.m4s -i audio.m4s -c copy final.mp4

3. 格式转换：如果下载的文件是.avi,.mov,.mkv等，想转为通用的.mp4，ffmpeg同样是首选。使用-c copy尝试无损转封装，如果编码器不支持则进行转码（耗时较长）：

   # 尝试无损转封装 ffmpeg -i input.avi -c copy output.mp4 # 如果失败，则重新编码（使用 libx264 视频编码和 aac 音频编码） ffmpeg -i input.avi -c:v libx264 -c:a aac output.mp4

在整个抓包下载的过程中，我个人的体会是，耐心和细心比掌握高深技巧更重要。第一次可能手忙脚乱，但成功定位并下载到第一个视频后，整个流程就会变得清晰。关键在于理解 HTTP 协议和流媒体技术的基本原理，剩下的就是熟练使用 Fiddler 这个“显微镜”去观察网络世界。最后记住，技术是一把双刃剑，所有抓取行为都应严格遵守相关网站的服务条款和版权法规，仅用于个人学习、测试或备份在合理使用范围内的内容，切勿用于非法传播和商业用途。