1. 现象复盘同一个固件TTN 上安安稳稳ChirpStack 上几十秒后“哑掉”1.1 测试平台的完整配置这次问题的主角是一批基于 STM32WL55 的节点设备用的是一颗将射频收发器和 Cortex-M4 应用核心集成在一起的 SoC目标场景是 LoRaWAN 智能门锁。板子跑的是 ST 官方的 LoRaWAN 中间件LoRaWAN MW2.5.0LoRaWAN MAC 协议版本 1.0.4频段配置在 AU915。网络服务器有两个环境在并行测试一个跑在 ChirpStack v4.x 上另一个是 The Things NetworkTTN的 V3 云环境。节点通过 OTAA 入网Class A 模式每 20 到 60 秒上报一次门锁状态、电量、开锁事件。第一批样品在 TTN 上跑了整整一周一切正常入网快、上行稳定几乎没有掉包。然而同一批固件、同一批硬件板子切到 ChirpStack 之后刚开始几十秒的表现也正常前 10 到 20 条上行消息都准时到达但随后节点就“沉默”了应用服务器上再也看不到任何上行数据。这种“会先好一会儿再突然死掉”的现象比一上来就不能用要难查得多。如果一开始就失败大概率是频段配置、密钥、MAC 参数哪一项没对齐但“先正常后故障”通常意味着设备在运行过程中接收到了某个改变运行状态的东西把状态机打坏了。1.2 复现步骤与典型表现我录了一套稳定的复现步骤节点上电ChirpStack 下发 Join AcceptOTAA 入网成功节点按周期上报前 10 到 30 条上行全部成功下行窗口也能收到应用下行在 ChirpStack 设备列表里能看到网络服务器定期发送 MAC 命令其中有一条 LinkADRReq从这条 LinkADRReq 发出后的下一个上报周期开始设备不再有任何上行网关侧也收不到数据如果让设备重新上电或者强制重新入网它又能工作几十秒然后在网络服务器再次下发设备相关配置后再次卡死。这中间有个最诡异的地方设备并没有掉线。在 ChirpStack 的网关和 Network Server 日志里设备仍然保持“已连接”状态没有 Join 超时重连也没有出现 DevNonce 重置。换句话说节点把 MAC 层状态保存得很好但它就是不发射了。这基本可以排除硬件损坏、电源异常这类低级问题问题一定出在 MAC 命令处理链路里。1.3 为什么这个故障值得单独拎出来写这个故障最让我头疼的点是“TTN 稳定ChirpStack 崩”因为在很多研发团队看来LoRaWAN 网络服务器都是按 LoRaWAN 规范实现的换一个服务器不应该导致设备行为不同。可现实是不同服务器对 ADRAdaptive Data Rate自适应速率策略的差异非常大而 ADR 又是通过 LinkADRReq 这种 MAC 命令直接干预设备运行参数的机制。设备端固件如果对某些命令组合处理有缺陷只有某类服务器才会踩中。尤其在做智能门锁这类产品时上报链路直接关系到远程开锁、状态同步、安全告警链路冻结就意味着“锁失控”。排查这个问题的过程也让我把 LoRaWAN 的 MAC 命令链路重新啃了一遍里面有很多文档里不写但实际调试时必须知道的东西。2. 追根LinkADRReq 到底是什么AU915 下它在改什么2.1 AU915 信道规划与 LinkADRReq 相关字段先补充一点 AU915 频段的基础知识否则后面讲的根本原因会很难理解。AU915 是澳大利亚采用的 915MHz 频段计划和北美 US915 基本同源主要差异在部分上下行频率和功率限定上。它的上行信道分成两段64 个 125kHz 信道编号 0 到 63中心频率从 902.3MHz 开始步进 200kHz到 914.9MHz8 个 500kHz 信道编号 64 到 71中心频率从 923.3MHz 开始步进 400kHz到 927.5MHz。LoRaWAN 节点入网后可以使用这些信道中的部分或全部。对于大多数节点默认配置ST 的中间件在 AU915 下会启用一组默认信道实现上是 Mask 里默认把前 16 个信道或者某个子带打开具体看 Region 配置。而 LinkADRReq 是网络服务器向节点下发的一条 MAC 命令主要用来调整节点的数据速率Data Rate、发射功率TX Power、信道掩码Channel Mask、每个消息的重复次数NbTrans等参数。这条命令包含的核心字段拆开是这样的命令标识符0x03前 4 位Data Rate 索引后 4 位TX Power 索引16 位ChMask用来在一个 Channel Mask ControlChMaskCntl对应的信道组里做位映射3 位Redundancy/ChMaskCntl决定 ChMask 的语义1 位 4 位NbTrans 和 RFU。在 AU915 区域下ChMaskCntl 的值非常关键ChMaskCntl含义0ChMask 对应信道 0 到 151ChMask 对应信道 16 到 312ChMask 对应信道 32 到 473ChMask 对应信道 48 到 634ChMask 对应信道 64 到 715保留6保留7ChMask 位置 0 到 5 表示 8 个 500kHz 信道 64 到 71位置 6 到 7 留用ChMask 其余位表示对全部 64 个 125kHz 信道做统一开关这里最容易出问题的就是 ChMaskCntl 等于 4 和 7 的映射。如果设备端中间件实现的 Region 校验函数没有正确展开这些索引或者错误地把某些保留位当作信道有效位来用就可能导致节点在接收到 LinkADRReq 之后把当前发射信道改到一个没有正确初始化的频率上。2.2 ChirpStack 和 TTN 的 ADR 行为差异在 TTN 上设备稳定在 ChirpStack 上崩掉直接原因就是两边 ADR 算法对 LinkADRReq 的构造方式不一样。TTN 的 ADR 算法更偏向“保守”它主要调整 Data Rate 和 TX Power信道掩码基本保持默认只有在设备入网时配置了额外信道时才可能去碰 ChMask。在 AU915 这种“默认信道已经足够多”的频段里TTN 通常会让节点保留在已入网时的信道上跑不会频繁在 MAC 层去改信道掩码。所以设备端中间件就算对 ChMaskCntl 某些取值处理不好也根本没机会触发。ChirpStack 的 ADR 则更“主动”。ChirpStack 会根据设备最近一段时间上报的 RSSI/SNR 统计动态计算最优的数据速率和信道计划然后把计算结果通过 LinkADRReq 下发。在我的环境里ChirpStack 还配置了“设备启用信道不固定”的策略也就是允许网络服务器根据区域子带情况把节点调度到其他信道组甚至可能下发 ChMaskCntl4 来对 8 个 500kHz 信道做掩码开关。当 ChirpStack 发出的这条 LinkADRReq 包含 AU915 的 500kHz 信道映射时STM32WL 中间件 2.5.0 的 Region 处理逻辑就无法正确执行状态机最终停在了一个“看似入网、实际无法发射”的位置。2.3 不是所有“省电优化”都能无脑开很多人会问既然 ADR 会引起问题那把设备端 ADR 关了不就行了吗这个想法只对了一半。ADR 是 LoRaWAN 网络优化的核心机制之一。打开 ADR网络服务器可以根据链路质量自动降低发射功耗、提高速率延长电池寿命。智能门锁这种电池供电设备出厂时如果面板数据设置好了 ADR长期运行能省不少电。如果因为一次偶发的兼容性问题就把 ADR 全部关掉等于放弃了 LoRaWAN 的一个重要优势后续功耗会产生明显差异。问题不应该是“要不要开 ADR”而是“在 ADR 开启时设备端能否正确处理网络服务器发下来的每一条 LinkADRReq”。所以我们后面修复的落点也是让设备端对 ADR 命令的解释和网络服务器对齐而不是简单粗暴地关功能。在真正动手改代码之前我花了大概一下午做了几组对照实验把问题锁定到了具体环节。这一步很重要如果方向错了后面打的补丁都是瞎忙。3. 排查过程实录三步把问题钉死3.1 先看网络服务器下发命令第一件事是确认 ChirpStack 到底下发了什么。ChirpStack 的应用服务器和网络服务器是分开的要拿完整日志得同时开几个组件。我在 ChirpStack 的设备页面看到了 LinkADRReq 的记录但只有一条聚合摘要看不到每条 MAC 命令里 ChMask、ChMaskCntl 的具体值。于是我直接把 ChirpStack Network Server 的日志级别调到 DEBUG在命令行里实时看docker logs -f chirpstack-network-server --since 10m日志里能看到类似这样的内容INFO[0015] ADR request received device_addr260B... dr3 tx_power2 ch_mask... ch_mask_cntl4 nb_trans1这里已经出现了一个关键信号ChMaskCntl 是 4而我的节点固件里 RegionAU915 的信道初始化掩码根本没有单独考虑 500kHz 信道组。也就是说网络服务器确实把设备往 500kHz 信道或相关掩码方向上推了一把。对比 TTN 侧日志TTN 的 MAC 命令大多是调整 Data Rate 和 TX PowerChMask 部分基本不动或者只在入网后下发一次初始的参数设置。这就是两边行为差异的最直接证据。这一条信息非常重要因为它告诉我们问题不是 LoRaWAN 协议本身不兼容而是 ChirpStack 下发的 ADR 命令格式触发了设备端中间件的某个处理缺陷。3.2 设备端中间件日志配合抓空口光看服务器端还不够设备端到底怎么处理这条 LinkADRReq必须从固件侧看。STM32WL 的 LoRaWAN 中间件提供了调试打印宏比如LORAMAC_PRINT和REGION_PRINT。在 stm32wlxx_lora_mac.c 或者 RegionAU915.c 里把对应的宏打开串口上就能看到 MAC 命令接收日志。我把打印等级调到最高复现故障后拿到了设备端的执行路径RX: LinkADRReq dr: 3 tx_power: 2 ch_mask: 0x0001 ch_mask_cntl: 4 nb_trans: 1 RegionAU915LinkAdrReq() update channel mask... channel mask updated Return: LORAMAC_STATUS_OK表面上看设备返回了 OKLinkADRReq 被接收了。但仔细看后面的射频发射日志会发现下一次上行周期到来时中间件没有走到RadioSetChannel的流程或者走到了但传入的频率不在正确范围内。也就是说中间件认为“信道已更新成功”但物理层没有真正切到新的发射频率。为了确认是不是射频层的问题我拿了一台频谱分析仪和一台 SX1301 网关抓空口。故障发生后网关侧确实完全收不到节点在信道上发出的任何前导码。节点中频侧也没有看到 TX RSSI 出现毛刺。换句话说节点在 MCU 层面可能就是没触发发射而不是发了但丢包。再到 IDE 里打断点发现现象更明确节点其实进入了某个 LoRaMac 状态机的错误分支在等待一个永远不会来的 TxDone 事件或者卡在MLME_Request的返回等待里。本质上中间件的状态管理被这条 LinkADRReq 打乱了。3.3 用排除法确认触发条件到这一步我已经高度怀疑设备端中间件对 AU915 下 ChMaskCntl4 的 LinkADRReq 处理有缺陷但为了严谨又做了三组对照实验在 ChirpStack 设备 profile 里关闭 ADR只保留网络服务器下发基本的 RX 窗口参数和 Join Accept 配置。结果节点持续稳定运行 4 小时以上没有出现冻结。保持 ADR 开启但在设备端把 Region 强行固定为 TTN 风格的默认信道掩码不响应 ChMaskCntl4 的信道切换。结果节点稳定但网络服务器一直重试下发 LinkADRReq日志里有很多 MAC 命令重传。保持 ADR 开启并把设备端中间件换成一个经过补丁的版本正确处理 ChMaskCntl4 的信道掩码。结果节点稳定运行ChirpStack 的 ADR 也能正常生效。三组实验下来触发条件彻底锁定ChirpStack 在 AU915 频段下发的 ChMaskCntl4 的 LinkADRReq会让 STM32WL LoRaWAN 中间件 2.5.0 进入错误状态上行链路冻结。4. 根因定位STM32WL MW 2.5.0 的 AU915 LinkADR 处理缺陷4.1 中间件版本与 MAC 状态机的坑STM32WL 的 LoRaWAN 中间件是 ST 在 CubeMX/CubeIDE 生态里提供的一套协议栈实现。2.5.0 这个版本在 AU915 频段已经能完成基本入网和通信但它的 Region 层代码对 AU915 的特有信道结构和 LinkADRReq 的 ChMaskCntl 值处理得不够细致。具体问题出在 RegionAU915.c 的 LinkADRReq 处理函数里。LoRaWAN MAC 协议要求当节点收到 LinkADRReq 时必须校验 ChMask、ChMaskCntl、Data Rate 和 TX Power 的组合是否合法。校验通过后需要更新节点的信道掩码、发射频率、速率和功率。在 AU915 下64 个 125kHz 信道和 8 个 500kHz 信道是两个不同的频率范围更新方式也不一样。2.5.0 的实现里对 ChMaskCntl4 的处理存在索引错位。ChMask 是一个 16 位掩码在 ChMaskCntl4 时它本应映射到信道 64 到 71对应 500kHz 信道组。但中间件代码里用的是类似“把 ChMask 当作 0 到 7 的索引然后直接赋值到某个 channel 数组”的逻辑没有把索引偏移到 64 到 71 的区间。这就导致节点理解的“新信道”和网络服务器理解的“新信道”完全对不上。如果只是“新信道”对不上最坏情况也就是节点在错误的频率上发送网关肯定收不到。但实际情况更恶劣中间件在校验阶段会计算“更新后的信道掩码是否有效”因为索引错位可能计算出一个“零有效信道”的结果。这个结果会让节点认为没有任何一个可用上行信道进而拒绝参与任何上行调度。于是 MAC 层既不报错命令返回 OK也不发射状态机卡死。4.2 ChMaskCntl 处理的逻辑错误在哪我后来把大概的缺陷逻辑模拟出来了。在 2.5.0 的某个分支中处理 ChMaskCntl4 的代码大致是if (chMaskCntl 4) { for (uint8_t i 0; i 16; i) { if ((chMask (1 i)) ! 0) { if (i 8) { // 这里本应该把信道索引映射为 64 i // 但实际代码可能直接使用 i导致把 500kHz 信道映射到了 0~7 } else { // 超出 8 个 500kHz 信道范围的位置可能被忽略或报错 } } } }更常见的一种错误是中间件在收到 ChMaskCntl4 后不是把 ChMask 的每一位对应到信道 64 到 71而是认为这是对“全部 64 个 125kHz 信道的某种扩展控制”结果把 500kHz 信道的开关状态错误地合并进了 125kHz 信道掩码导致整体掩码自相矛盾。还有些派生版本在处理 ChMaskCntl7 时也有问题LoRaWAN 规范里 ChMaskCntl7 代表“ChMask 里最低 6 位控制 500kHz 信道 64 到 71其余位控制全部 125kHz 信道的统一开关”。如果中间件只解析了低 6 位忽略了对 125kHz 信道组的统一控制就会出现在网络服务器把所有 125kHz 信道关闭、只保留 500kHz 信道时节点却仍然认为一些 125kHz 信道可用最终选择一个未实际启用的信道发送。这两个问题叠加起来就是“接收到 LinkADRReq 之后设备潜在可用的信道集合被算错最后选择一个非法信道或者一个被禁用的信道导致上行静默”。4.3 为什么 TTN 恰好“免疫”TTN 稳定不代表 TTN 没有发过 LinkADRReq它确实也发但它的 ADR 策略通常不会在 AU915 下用 ChMaskCntl4 去切换 500kHz 信道。TTN 在 AU915 区域内设备默认使用的 125kHz 信道已经能满足多用户共存需求ADR 算法把主要精力放在调整 Data Rate 和 TX Power 上对信道掩码的更新比较保守。这带来的结果是即使节点中间件有上述缺陷只要没有服务器用 ChMaskCntl4或 7去碰 500kHz 信道节点就一直在 125kHz 默认信道上正常通信。于是同一份固件换了个网络服务器就立刻现形。这种情况其实很常见很多协议栈在某一区域的“默认配置路径”上跑得很顺但一旦网络服务器的调度策略覆盖了中间件没有充分测试的边角路径问题就暴露了。不能说 TTN 的 ADR 实现就比 ChirpStack 更标准而是 ChirpStack 更激进地使用了协议里出现频率较低的字段和组合。5. 修复方案与落地代码5.1 方案一升级 LoRaWAN 中间件最推荐的修复方式其实是升级中间件版本。ST 在后续的 LoRaWAN 中间件版本比如 2.6.0、3.0.x、4.x里做了不少 Region 层和 MAC 状态机的修正其中就包括对 AU915 信道掩码映射的完善。STM32WL 的用户可以通过 STM32CubeMX 的中间件管理器直接拉新版 LW 中间件也可以从 ST 的 GitHub 仓库下载。升级之后需要把 Region 配置和射频配置重新生成重点检查RegionAU915.c里的默认信道掩码和LoRaMac初始化配置。升级不是万能的但大概率能解决这个特定问题。如果你用的是某个带 BSP 和网络协议栈的完整项目升级之前一定要做完整的回归测试。LoRaWAN 中间件版本升级往往涉及 MAC API 的签名变化比如LoRaMacMibSetRequestConfirm的参数类型有所调整应用层代码也要顺手改。5.2 方案二手动 patch RegionAU915.c 的 LinkAdrReq 分支如果产品的量产计划已经拍了或者你不能轻易改动中间件版本也可以直接在当前版本上打补丁。以 2.5.0 为基础在RegionAU915LinkAdrReq函数里把 ChMaskCntl4 和 ChMaskCntl7 的分支做重写。我的补丁思路是这样的先按 LoRaWAN 规范把 ChMaskCntl 映射到正确的信道索引区间更新信道掩码时把 125kHz 信道和 500kHz 信道分开处理更新完所有可用的信道后再重新计算当前的默认数据信道如果计算结果显示没有任何可用信道则返回LORAMAC_STATUS_PARAMETER_INVALID拒绝执行这条 LinkADRReq而不是让状态机进入死胡同。核心补丁代码大约这样// 在 RegionAU915LinkAdrReq 中替换原来的 chMaskCntl 处理分支 if (chMaskCntl 4) { // 500kHz 信道 64~71 for (uint8_t i 0; i 8; i) { uint8_t channelIndex 64 i; if ((chMask (1 i)) ! 0) { RegionAU915EnableChannel(channelIndex); } else { RegionAU915DisableChannel(channelIndex); } } } else if (chMaskCntl 7) { // 高 8 位控制 125kHz 信道低 6 位控制 500kHz 信道 for (uint8_t i 0; i 6; i) { uint8_t channelIndex 64 i; if ((chMask (1 i)) ! 0) { RegionAU915EnableChannel(channelIndex); } else { RegionAU915DisableChannel(channelIndex); } } // 125kHz 信道的统一控制 uint16_t mask125 (chMask 0xFF00) 8; for (uint8_t i 0; i 64; i) { // mask125 的第 7 位是最高位可根据设备实际支持的子带选择处理逻辑 // 这里只做演示真正的实现需要严格按照 AU915 的 ChMaskCntl7 定义 } }这只是一个示例实际项目里你必须结合中间件版本的具体函数签名、Region 结构体字段来写。另外补丁完成后一定不要只做单次测试要把 ChirpStack 的 ADR 打开连续跑 24 小时以上让它经历各种信道切换组合确保各种 ChMaskCntl 值都覆盖到。5.3 方案三不改固件只改网络服务器配置如果你暂时不想动设备端代码还可以通过 ChirpStack 配置来规避问题。在 ChirpStack 的设备配置页面把 ADR 设置为禁用或者把 ADR 的“漫游周期”调得很大。这样网络服务器不会主动通过 LinkADRReq 去调整节点的信道掩码和速率。最简单的方法是先把 ADR 关掉然后找一个业务量不大或者对功耗不敏感的时段再慢慢解决设备端协议栈兼容问题。也可以在 ChirpStack 的 Network Server 配置里把 AU915 区域的信道计划限制到设备实际支持的默认信道不让服务器下发 ChMaskCntl4 这种会涉及 500kHz 信道组的掩码。这样 ChirpStack 虽然还是会发 LinkADRReq但命令的内容会落在中间件已经处理得很好的路径里冻结就不会触发。这个方案适合验证“是否就是 ADR 引起的问题”也适合应急恢复业务但它不是长久的解决办法。长期来说设备端还是要能正确处理网络服务器的各种合法 ADR 命令。5.4 针对智能门锁场景的上行保活兜底智能门锁是一个典型的“低功耗、定期上报、偶尔有下行控制”的场景。对于这类产品即使我们把 ADR 链路修复了我还是建议在应用层加一重保活机制防止未来遇到其他网络服务器、其他协议栈版本时再次出现“静默死亡”。比较简单可靠的做法是连续 N 次上行消息没有收到网络服务器 ACK 或确认就触发强制重新入网。LoRaWAN 的 Class A 节点可以通过周期性地发送未确认消息并观察网络服务器是否回下行数据来判断链路是否仍然健康。如果长时间没有任何下行回调应用层就重新执行 OTAA 流程。还有一招是在应用层做“注册确认”。设备每次上报状态时网络服务器在合适窗口回一个应用层的确认包。设备如果在 3 到 5 个周期内收不到确认就认为链路异常主动执行重新入网。这样即使 MAC 层状态机卡住应用层也能兜底把设备从“冻结”中拉回来。对于门锁这种安全属性强的设备我还会在固件里加一个看门狗把“在指定时间内没有成功完成任何上行且没有收到任何下行”作为一个异常条件触发复位。但要注意看门狗复位后如果还收到同一条病态的 LinkADRReq可能又会冻结所以还是要配合中间件升级或补丁一起做才能形成一个完整的闭环。6. 最后分享一点经验别迷信“同一个 LoRaWAN 版本号”这次问题解决之后我最大的感受是在 LoRaWAN 这种生态里设备端和网络服务器端都声称“支持 LoRaWAN 1.0.4”不代表它们对每一条 MAC 命令的每个字段都做到了完全一致的理解。不同网络服务器的 ADR 策略、默认参数、子带选择策略可能差别很大。TTN 上稳如老狗不代表 ChirpStack 上就一定稳反过来说也不能因为某个平台问题就全盘否定某个中间件版本。关键是出现问题时要能快速把“上层业务故障”一层层剥离到“MAC 命令处理环节”这个层面然后针对特定命令做回归和补丁。我现在的习惯是新项目拿到一块 LoRaWAN 模块/SoC 后不会只在一个网络服务器上做过夜测试。至少要在 ChirpStack、TTN 各跑一轮长时间稳定性测试故意把 ADR 打开让网络服务器尽量多地触发各种 MAC 命令组合把协议栈的边角路径都压一遍。条件允许的话再搭一个私有的 LoRaWAN 网络服务器把 LinkADRReq 的 ChMaskCntl 人工枚举一遍直接验证设备端对每一种合法取值的行为。如果你手里现在正好有一批 STM32WL 产品在 ChirpStack 上遇到了类似“入网正常、ADR 后静默”的问题建议你按这个顺序排查先看网络服务器下发命令内容再在设备端开启 Region 调试日志然后把 ADR 临时关掉做二分确认。确认是 LinkADRReq 的 ChMaskCntl 处理差异之后优先升级 LoRaWAN 中间件到新版本升级受限就手写补丁补丁都来不及就先用网络服务器配置稳住业务再找窗口时间发货。产品在产线多跑一分钟测试到了用户手里就能少一个半夜被叫醒的售后问题。这是我这次踩坑最大的价值。