面向电力多模态融合的语义差异性和感知能力差异性分析方法OA北大核心CSTPCD

多模态融合是实现电力系统数字化的重要技术手段,但多模态特征间的差异性限制了融合感知效果。因此,首先对电力多模态数据融合中的语义差异性和感知能力差异性现象进行了深入分析,对差异性产生的特征同化和权重决策问题进行了剖析。然后,针对语义差异性问题,使用角度差对多模态语义差异进行表征,并基于此寻找联合表征空间,实现电力多模态特征同化;其次,针对感知能力差异性问题,使用交叉损失熵对电力多模态感知能力进行表征,并基于此构建权重决策模块,实现多模态特征融合权重计算。最后,以前期所提融合框架为基础,提出了针对多模态差异性问题的高容错性特征融合模型。仿真以输变电线路应急抢修场景为例,基于所提分阶段训练策略进行模型训练,并从融合感知、特征同化以及权重决策机制3个方面验证了所提方法的有效性。