Содержание
Что вошло в открытые погодные данные Google
13 ноября Google DeepMind открыла два набора данных — SatWeave и PARDIG, которые использует погодная AI-модель WeatherNext 3. Исследователи и разработчики уже могут обращаться к историческим архивам и обновляемым потокам наблюдений. Это выпуск данных для собственных моделей и приложений, а не запуск нового пользовательского погодного сервиса.
SatWeave: спутниковая мозаика вместо разрозненных снимков
SatWeave объединяет геостационарные спутниковые наблюдения в общую сетку с пространственным разрешением 0,1 градуса — примерно 10 км. Набор содержит 17 спектральных каналов: от видимого и ближнего инфракрасного диапазона до водяного пара и теплового излучения. Такая подготовка снимает с разработчика часть работы по согласованию проекций, калибровки и форматов разных спутников.
Текущий поток обновляется каждый час с задержкой около часа. Исторический архив за 2016–2025 годы имеет получасовой шаг; данные с 2026 года — часовой. Для WeatherNext 3 эти наблюдения служат входом, позволяющим обновлять начальные условия прогноза чаще, чем при шестичасовом цикле атмосферного анализа.
PARDIG: осадки с шагом 15 минут, но не мгновенная выдача
PARDIG оценивает интенсивность осадков по всей планете на сетке примерно 10 км. AI-модель обучена на наблюдениях космического радара и радиометра миссии NASA/JAXA GPM; для расчётов она использует спутниковые данные и атмосферные поля ECMWF. Архивы охватывают период с 1999 года, но длинная историческая и более оперативная версии опираются на разные входные данные.
Временной шаг оценки составляет 15 минут. Это не означает поступление новой порции данных каждые 15 минут: оперативная версия PARDIG-NRT публикует пакеты за шесть часов. Согласно документации, фактическая задержка отдельных кадров составляет примерно от двух до восьми часов, в среднем около пяти. В Earth Engine на старте размещены статические архивы; продолжающийся поток находится в Cloud Storage.
Для каких задач пригодится выпуск
Наборы дают исходные материалы для обучения и проверки погодного ИИ, анализа сильных дождей и разработки гидрологических приложений. SatWeave также позволяет исследовать облачность, солнечную генерацию и признаки пожаров. Это возможные направления применения данных, а не обещание готовой точности для любого региона.
Ограничения существенны: геостационарные спутники хуже видят высокие широты, а не все каналы доступны во всех областях. Для PARDIG меняющийся состав исторических наблюдений и различия между версиями могут создавать скачки, не связанные с климатом. Google отдельно отмечает сложности со снегом, слабой моросью и горным рельефом. Результаты на глобальной сетке не равнозначны локальным измерениям осадкомера.
Где попробовать
Условия, структуру архивов и примеры Python-запросов Google опубликовала в руководствах по PARDIG и SatWeave. Оба набора доступны в формате Zarr через Google Cloud Storage по лицензии CC BY 4.0. Документация указывает доступ для аккаунтов Google Cloud без отдельной заявки на разрешение. Это отличается от оперативных прогнозов WeatherNext, для которых предусмотрена своя процедура доступа. Открытая лицензия на данные не означает, что любые вычисления в облаке бесплатны.
Как открыть данные для своего проекта
Выберите набор и период
В руководстве PARDIG выберите длинный архив LR за 1999–2023 годы или NRT с 2016 года. Для спутниковой мозаики используйте отдельное руководство SatWeave.
Подготовьте Python-окружение
Установите xarray, zarr и obstore по официальному примеру. Для работы с облачным аккаунтом используйте предусмотренную Google Cloud авторизацию.
Откройте небольшой фрагмент
Возьмите путь к Zarr-хранилищу из документации, откройте его через obstore и xarray и ограничьте выборку нужной областью и временем вместо загрузки всего архива.
Проверьте шкалы и пропуски
Сверьте единицы измерения, направление широтной оси и диапазон долгот с документацией выбранного набора. Учитывайте задержку оперативных данных и отсутствующие значения спутниковых каналов.