ChartGalaxy++: 차트 이해와 생성을 위한 풍부한 주석 데이터셋
ChartGalaxy++: A Richly Annotated Dataset for Chart Understanding and Generation
한국어 초록
인포그래픽 차트는 차트, 텍스트, 이미지 등 시각 요소들의 응집력 있는 구성을 통해 데이터를 전달한다. 기존 인포그래픽 차트 데이터셋은 주로 개별 요소에 경계 상자와 범주 레이블을 주석으로 부여한다. 이러한 요소 수준의 주석은 계층적·공간적 관계를 포착하지 못하므로, 인포그래픽 내에서 요소들이 어떻게 조직되고 서로 연관되는지를 이해하거나 잘 조직된 디자인을 생성하는 데 활용하기에 한계가 있다. 이러한 한계를 해결하기 위해 본 논문은 217,195개의 인포그래픽 차트로 구성된 풍부한 주석 데이터셋 ChartGalaxy++를 소개한다. 이 데이터셋의 핵심은 장면 그래프 표현으로, 노드는 시각 요소와 의미적 그룹을 나타내고 에지는 이들의 계층적·공간적 관계를 인코딩한다. 실제 인포그래픽의 경우 시각 요소를 검출하고 점진적으로 그룹화하여 장면 그래프를 구축하며, 합성 인포그래픽의 경우 생성 과정에서 직접 장면 그래프를 도출한다. 본 논문은 1) 이미지-장면 그래프 예측, 2) 장면 그래프로 보강한 인포그래픽 질의응답, 3) 이미지 생성에서의 장면 그래프 보존 평가라는 세 가지 응용을 통해 ChartGalaxy++의 유용성을 입증한다. 이들 응용은 종합적으로 차트 이해와 생성의 발전에 ChartGalaxy++가 지니는 가치를 보여준다.
원문 초록
Infographic charts communicate data through cohesive compositions of visual elements such as charts, text, and images. Existing infographic chart datasets primarily annotate individual elements with bounding boxes and category labels. Such element-level annotations do not capture hierarchical and spatial relationships, limiting their use for understanding how elements are organized and related within an infographic and for generating well-organized designs. To address this limitation, we introduce ChartGalaxy++, a richly annotated dataset of 217,195 infographic charts. At the core of this dataset is a scene graph representation, in which nodes represent visual elements and semantic groups, and edges encode their hierarchical and spatial relationships. For real infographics, we construct scene graphs by detecting and progressively grouping visual elements; for synthetic ones, we derive them directly from the generation process. We demonstrate the utility of ChartGalaxy++ through three applications: 1) image-to-scene-graph prediction, 2) scene-graph-augmented infographic question answering, and 3) evaluation of scene graph preservation in image generation. Together, these applications highlight the value of ChartGalaxy++ for advancing chart understanding and generation.
제출 이력
확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.
함께 살펴볼 논문
공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.
공통 태그로 연결된 공개 논문이 아직 없습니다.
토론
이 논문과 연결된 포럼 글이 아직 없습니다.