对推荐时,将经局部风险标记后的视觉令牌和文本指令令牌输入到大模型中。让其结合多模态知识图 谱,通过知识检索与模型生成协同迭代的方式,让多模态大模型针对风险做出应对决策推荐。所以, 为了得到最合适的决策方案,水利多模态知识图谱的构建对于精控大模型尤为重要。 图 1 方法总体框架 图 2 VIP - LLaVA架构 — 5 2 1 —