arXiv:2404.00411

Aardvark weather: end-to-end data-driven weather forecasting

Anna Vaughan, Stratis Markou, Will Tebbutt, James Requeima, Wessel P. Bruinsma, Tom R. Andersson, Michael Herzog, Nicholas D. Lane, Matthew Chantry, J. Scott Hosking, Richard E. Turner

제출 2024-03-30

원문 초록

Weather forecasting is critical for a range of human activities including transportation, agriculture, industry, as well as the safety of the general public. Machine learning models have the potential to transform the complex weather prediction pipeline, but current approaches still rely on numerical weather prediction (NWP) systems, limiting forecast speed and accuracy. Here we demonstrate that a machine learning model can replace the entire operational NWP pipeline. Aardvark Weather, an end-to-end data-driven weather prediction system, ingests raw observations and outputs global gridded forecasts and local station forecasts. Further, it can be optimised end-to-end to maximise performance over quantities of interest. Global forecasts outperform an operational NWP baseline for multiple variables and lead times. Local station forecasts are skillful up to ten days lead time and achieve comparable and often lower errors than a post-processed global NWP baseline and a state-of-the-art end-to-end forecasting system with input from human forecasters. These forecasts are produced with a remarkably simple neural process model using just 8% of the input data and three orders of magnitude less compute than existing NWP and hybrid AI-NWP methods. We anticipate that Aardvark Weather will be the starting point for a new generation of end-to-end machine learning models for medium-range forecasting that will reduce computational costs by orders of magnitude and enable the rapid and cheap creation of bespoke models for users in a variety of fields, including for the developing world where state-of-the-art local models are not currently available.

함께 살펴볼 논문

공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.

arXiv:2406.14399v4cs.LG공통 태그 Weather Forecasting공식 코드 · Papers with Code

운용 전 지구 관측소 기상 예측을 위한 물리 정보 기반 시계열 모델 벤치마킹

Benchmarking Physics-Informed Time-Series Models for Operational Global Station Weather Forecasting

시계열 예측(TSF) 모델의 개발은 종종 포괄적인 데이터셋의 부족으로 제약받습니다. 특히 전 지구 관측소 기상 예측(GSWF)에서는 기존 데이터셋이 규모가 작고, 시간적으로 짧으며, 공간적으로 희소합니다. 이를 해결하기 위해, 우리는 실제 상황을 더 잘 반영하는 대규모 관측 기상 데이터셋인 WEATHER-5K를 소개하며, 이는 개선된 모델 학습과 평가를 지원합니다. 최근 TSF 방법들은 벤치마크에서 좋은 성능을 보이지만, 복잡한 기상 역학과 극한 사건을 포착하는 데 있어 운용 수치 기상 예측 시스템보다 뒤처집니다. 우리는 미래의 기상 상태를 예측하기 위해 동적 코어와 트랜스포머 잔차를 결합한 물리 정보 기반 예측 모델인 PhysicsFormer를 제안합니다. 기압-바람 정렬과 에너지 인식 평활화 손실을 통해 물리적 일관성을 강제하여, 복잡한 시간적 패턴을 포착하면서 타당한 역학을 보장합니다. 우리는 여러 기상 변수, 극한 사건 예측, 모델 복잡도에 걸쳐 PhysicsFormer와 다른 TSF 모델을 운용 시스템과 비교 벤치마킹하여, 학계 TSF 모델과 운용 예측 간의 격차에 대한 포괄적인 평가를 제공합니다. 데이터셋과 벤치마크 구현은 다음에서 확인할 수 있습니다: https://github.com/taohan10200/WEATHER-5K.

토론

이 논문과 연결된 포럼 글이 아직 없습니다.