Hallo4D：面向一致时空生成的多模态幻觉缓解

2026-07-16 · AI 论文

摘要（译文）：现有 3D 生成方法常依赖 2D 扩散监督而无显式几何一致性机制，导致重复结构、几何错位等空间幻觉；4D 生成中更出现抖动、身份闪烁、结构漂移。Hallo4D 是统一、模型无关的框架，缓解 3D/4D 生成的时空幻觉。引入"生成-检测-校正"范式，用大型多模态语言模型(LMM)从多视图多帧渲染中识别并总结时空不一致，共识驱动图像空间一致性优化（LMM 选择器多模型投票评估候选校正），无需重训。大量实验超越强基线。