페타바이트 규모의 건초더미에서 바늘 예측하기: 위성 영상에서의 개방 어휘 이벤트 예측
Predicting the Needle in a Petabyte Scale Haystack: Open-Vocabulary Event Anticipation in Satellite Imagery
한국어 초록
위성 군집은 이제 매일 지구를 촬영하며, 삼림 벌채부터 도시 건설에 이르는 이벤트의 전 과정을 포착한다. 이러한 이벤트를 완료 이전에 예측하면 시의적절한 개입이 가능하지만, 기존 시스템은 개방 어휘에 걸쳐 변화가 어디에서 발생하는지, 무엇이 될 것인지, 언제 끝날 것인지를 함께 식별하지 못한다. 이러한 모델을 구축하려면 다양한 이벤트 데이터가 필요하지만, 이벤트는 건초더미 속의 바늘과 같아서 전 지구 규모의 수작업 주석은 불가능하다. 본 논문은 변화를 서로 다른 시점의 비전-언어 모델 임베딩 간 벡터 차이로 표현하여 이 문제를 해결한다. 이러한 산술적 접근은 잠재 공간에서 의미적 변환을 직접 탐색할 수 있게 하며, 이를 통해 (1) 수작업 주석 없는 전 지구 이벤트 발견용 자동 데이터 엔진과 (2) 우리가 아는 한 최대 규모의 전 지구 위성 이벤트 데이터셋을 구축하고, 이를 이용해 (3) 새로운 전 지구 규모 이벤트 예측 모델을 학습한다. 이 데이터셋은 6개 대륙에 걸쳐 PlanetScope와 Sentinel-2에서 얻은 약 200만 장의 이미지로, 64개 이상의 이벤트 유형에 걸친 21,000개 이상의 위치로 구성된다. 본 모델은 최대 F1 점수 93.5%로 변화를 탐지하고, 예측 이벤트 검색에서 기준선보다 3.6배 우수한 성능을 보이며, 완료 9개월 전에도 중앙값 3일의 오차로 완료일을 예측한다. 코드: https://github.com/ShreelekhaR/predicting-the-needle
원문 초록
Satellite constellations now image the Earth daily, capturing the lifecycle of events from deforestation to urban construction. Anticipating these events before completion enables timely intervention, yet existing systems cannot jointly identify where a change occurs, what it will become, and when it will finish across an open vocabulary. Building such a model requires diverse event data, but events are like needles in a haystack, making manual annotation at global scale infeasible. We address this problem by representing change as the vector difference between vision-language model embeddings at distinct time points. This arithmetic approach allows us to search for semantic transformations directly in the latent space, enabling (1) an automated data engine for global event discovery without manual annotation and (2) the largest global satellite event dataset to our knowledge, comprising 21,000+ locations across 64+ event types with ~2M images from PlanetScope and Sentinel-2 spanning six continents, to train (3) a novel global-scale event anticipation model. Our model detects change with a 93.5% max F1 score, outperforms baselines 3.6x on predicted event retrieval, and forecasts completion dates with a 3-day median error, even nine months before completion. Code: https://github.com/ShreelekhaR/predicting-the-needle
제출 이력
확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.
함께 살펴볼 논문
공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.
공통 태그로 연결된 공개 논문이 아직 없습니다.
토론
이 논문과 연결된 포럼 글이 아직 없습니다.
저자 비고
arXiv Comments
29 pages, 9 figures, to be published in NeurIPS 2026