强化学习3年踩坑：农业微电网的确定性幻觉被一张图打破

去年夏天，一位做垂直农场的朋友找我吐槽：他们的AI调度系统理论上已经"最优"，却在用电高峰频繁触发环保监管警报。罚款单堆了7张，系统还在坚持"我的计算不会错"。

这不是算法偷懒，是整个行业对"不确定性"的集体失明。太阳能输出、作物需水量、电网规则——这些变量在传统强化学习里被压成确定性的数字，像把一团云塞进方盒子。

01 | 从一次失败实验开始的图网络探索

我的切入点很具体：一个50亩的智能农场，光伏、储能、灌溉、温控四张网各自为政。传统做法把每个设备当独立优化目标，结果光伏拼命发电时，储能已满、灌溉系统却在干等——三方数据从未真正对话。

图神经网络（Graph Neural Network，GNN）的启示在于：把农场设备变成节点，能量流动变成边，整个微电网就是一张动态变化的拓扑图。

但普通GNN有个盲区。它处理的是确定性的节点特征，而农业场景里，"下午3点能发多少电"本身就是概率分布——云层厚度、面板温度、逆变器老化程度都在抖动。你需要的是能吞下不确定性、再吐出新概率的架构。

这就是概率图神经网络（Probabilistic GNN，PGNN）的入场券。它把每个节点的特征嵌入成概率分布，而非单点数值。换句话说，系统不再断言"光伏出力=47kW"，而是说"有85%概率落在42-52kW区间"。

02 | 政策约束不是墙，是参与博弈的玩家

更棘手的发现藏在约束条件里。环保法规、并网规则、安全阈值——传统模型把它们当硬边界，触碰即违规。但真实运营中，这些规则本身带有弹性空间：夏季尖峰电价时段的排放上限可能临时调整，灌溉用水配额会随水库水位浮动。

我把这些约束重新建模为概率实体，让它们和能源变量在同一图结构里互相推断。

具体实现上，微电网被定义为动态图 $\mathcal{G}_t = (\mathcal{V}, \mathcal{E}_t, \mathcal{X}_t)$。节点集合 $\mathcal{V}$ 包含光伏阵列、储能电池、水泵、温控机组；边集合 $\mathcal{E}_t$ 随时间变化，反映能量流和信息流的实时连接；节点特征 $\mathcal{X}_t$ 则是概率嵌入向量。

优化目标写成带约束的期望累积奖励：

$$\max_{\pi} \mathbb{E}_{\tau \sim p(\tau|\pi)} \left[ \sum_{t=0}^{T} \gamma^t R(s_t, a_t) \right]$$

约束条件用概率形式表达：

$$\mathbb{P}(c_i(s_t, a_t) \leq 0) \geq 1 - \epsilon_i \quad \forall i, t$$

这里的 $\epsilon_i$ 是允许违反约束的风险阈值。不是绝对禁止越界，而是控制越界概率——这对农业场景更实用。比如灌溉用水约束，完全不断水可能减产，适度冒险反而总收益更高。

03 | 空间-时间依赖：传感器数据的隐藏剧本

试点农场的传感器数据暴露了一个被忽视的维度。土壤湿度探头分布在12个区域，传统模型把它们当并行输入；但PGNN的图结构自动捕捉了空间关系——A区灌溉后，地下渗流会影响B区湿度，这个延迟效应在2-4小时后显现。

更微妙的是光伏-灌溉的耦合。夏季正午发电峰值恰好匹配蒸腾作用最强时段，但储能容量有限，必须决策：优先卖电给电网，还是驱动水泵？

这个决策没有全局最优解，取决于实时电价概率分布、次日降雨预测置信度、作物生长阶段的需水弹性。PGNN把所有这些变量压进同一推断框架，输出的是动作的概率分布，而非单一指令。

对比实验显示，在相同硬件配置下，概率图方法将约束违反率从传统强化学习的23%压到4%以下，同时能源成本只增加7%——罚款节省远超这部分开销。

04 | 从实验室到田埂：还在磨合的落地细节

当前瓶颈在计算成本。变分推断（Variational Inference）的每一步都需要采样近似，农场边缘设备的算力撑不住完整推理。我的折中方案是云-边分层：边缘节点跑轻量级确定性网络，关键决策上送云端PGNN，延迟控制在15秒内。

另一个未解问题是多农场协同。单个农场的图结构相对规整，但区域微电网互联后，节点规模爆炸，图注意力机制的复杂度呈平方增长。最近在和团队尝试图稀疏化技术，把远距离弱连接直接剪枝。

政策层面的变量更难量化。某省去年突然调整分布式光伏上网电价，我的概率模型里的电价分布参数瞬间失效，系统花了两周重新校准。这提醒我们：技术能解决不确定性，但无法消除黑天鹅。

那位垂直农场的朋友现在用上了第二版系统。上个月他发消息说，环保罚款归零，但新问题出现了——系统开始"过于谨慎"，在电价低谷期也拒绝满负荷储能，怕的是"万一明天政策变呢"。

概率推断给了机器敬畏不确定性的能力，但敬畏和保守的边界，该由谁划定？