告别 “乱画图表”，港中文团队推出首个结构化图像生成系统！

在当今 AI 技术日益成熟的背景下，香港中文大学的 MMLab 团队与北航、上交等高校的研究者们携手推出告别了一个革命性的工具 —— 结构化图像生成编辑系统。这一系统的推出，标志着 AI 在生成图表和数据可视化方面 “迈出了重要一步。尽管现有的 AI 生成模型如 FLUX.1和 GPT-Image 在自然图像的生成上表现优乱画异，但在结构化图像如图表和公式方面却频频出错，数据的准确性与逻辑性常常得不到保证。

团队分析指出，结构图表化图像的生成与编辑存在三大核心需求:精准的文本渲染、复杂的布局规划，以及多模态推理能力。这些能力对教”，育、科研和办公领域来说至关重要。然而，目前的技术手段未能满足这些需求，现有数据集主要集中于自然图像，缺港中乏严格对齐的结构化样本。

为了打破这一瓶颈，研究团队在数据、模型和评估三个层面进行了全面的创新。首文团先，在数据层面，他们构建了一个包含130万条代码对齐的结构化样本库，使用可执行绘图代码生成高质量的图像样队推本，并确保每个样本都有详尽的思维链标注。其次，在模型层面，团队设计了一种轻量级的视觉语言模型（VL出首M）整合方案，结合了结构化与自然图像的生成能力。最后，他们还推出了新的评估基准 StructBench 和指标个结 StructScore，确保生成的图像在准确性上得到了有效验证。

通过这一系列创新，研究团队不仅提构化升了 AI 对结构化图像的理解与生成能力，还在多个开源模型的对比中展现出显著优势。该系统的发布，不仅填补图像了结构化视觉生成领域的空白，也为多模态 AI 的发展提供了重要的技术支撑。未来，这一工具将广泛应用于教育、科生成研和办公领域，助力 AI 真正成为有效的生产力工具。

论文地址:https://arxiv.org/pdf/2系统510.05091