基于强化学习的CAE控制

使用强化学习（RL）进行仿真参数最优控制或主动流动控制的方法。将环境定义为CFD仿真，并根据奖励信号优化策略。

用数学公式表示的话就是这样。

策略梯度法：

基于强化学习的CAE控制，是旨在融合数据驱动方法与基于物理建模的重要技术。传统CAE分析中计算成本是主要瓶颈，而引入基于强化学习的CAE控制可以大幅改善计算效率与预测精度之间的权衡。本方法的数学基础立足于函数逼近理论与统计学习理论，其泛化性能的保证和收敛性的严格分析是理论研究的课题。特别是在输入维度高的情况下，应对“维度诅咒”是实用化的关键，降维和稀疏性的利用是重要的方法。

展示将机器学习模型应用于CAE时的基本数学框架。

AI×CAE中的损失函数，由数据驱动项和物理约束项的加权和构成：

这里 $\mathcal{L}_{\text{data}}$ 是与观测数据的平方误差，$\mathcal{L}_{\text{physics}}$ 是控制方程的残差，$\mathcal{L}_{\text{reg}}$ 是正则化项。权重参数 $\lambda$ 的调整对学习的稳定性和精度有很大影响。

代理模型最大的挑战在于学习数据范围外（外推区域）的预测精度。虽然通过融入物理定律可以改善外推性能，但难以完全保证。

当输入参数空间维度较高时，所需样本数呈指数级增长。通过主动学习（Active Learning）或拉丁超立方采样（LHS）进行高效的样本配置非常重要。

• 学习数据需充分代表分析对象的物理现象
• 输入参数与输出关系需平滑（存在不连续时需进行区域分割）
• 主要目的是降低计算成本，对于需要高精度的最终验证应结合使用传统求解器
• 若学习数据质量不足（未进行网格收敛、未进行V&V），模型可靠性会下降

理解支配分析对象物理现象的无量纲参数，是进行适当模型选择和参数设定的基础。

• 佩克莱数 Pe: 对流与扩散的相对重要性。Pe >> 1 时为对流主导（需要稳定化方法）
• 雷诺数 Re: 惯性力与粘性力之比。流体问题的基本参数
• 毕渥数 Bi: 内部传导与表面对流之比。Bi < 0.1 时可应用集总热容法
• 库朗数 CFL: 数值稳定性的指标。显式解法中需要 CFL ≤ 1

对于分析结果的数量级估计，基于白金汉Π定理的量纲分析非常有效。使用特征长度 $L$、特征速度 $U$、特征时间 $T = L/U$，预先估计各物理量的数量级，以确认分析结果的合理性。

选择合适的边界条件直接关系到解的唯一性和物理合理性。边界条件不足会导致不适定问题，边界条件过多则会产生矛盾。

嗯，状态不错！ 实际动手尝试是最好的学习方式。有不明白的地方随时可以问我。