多模态大模型实战15 📅 2026/7/24 2:43:07 第15章 多模态安全与对齐——幻觉检测与红队测试学习目标理解VLM幻觉问题的类型和产生原因掌握幻觉检测方法了解多模态对齐技术(DPO/RLHF)认识红队测试和安全评估掌握防御策略15.1 VLM幻觉问题什么是VLM幻觉VLM幻觉是指模型生成与图片内容不符的回答,包括"看到"不存在的物体、忽略关键细节、编造事实。幻觉类型类型描述示例对象幻觉捏造不存在的物体“图片中有一只猫”(实际没有)属性幻觉错误描述物体属性“红色的车”(实际是蓝色)关系幻觉错误描述物体关系“猫在桌子上”(实际在桌子下)事实幻觉编造图片中的文字/数据“价格是99元”(实际是199元)