Подпроект Africa Rainfall Project
Интервью с командой проекта «Africa Rainfall Project» (машинный перевод)
Узнайте о текущем состоянии и будущих планах проекта «Africa Rainfall Project» из этого краткого интервью.
Опубликовано: 29 июля 2022 г.
Дорогие волонтеры, сегодня у нас для вас кое-что необычное. Пока мы работаем над полным перезапуском World Community Grid, мы подумали, что сейчас будет отличный шанс напомнить сообществу о замечательных командах, с которыми мы сотрудничаем, и о том, что для них значит WCG. Для начала мы задали команде проекта «Africa Rainfall Project» ряд вопросов, которые ответят на любые вопросы, которые могут возникнуть у ветеранов и новых добровольцев об их исследованиях. Вот чем они поделились с нами.
> На что направлен ваш проект?
Проект African Rainfall Project направлен на запуск численной модели погоды для всей Африки к югу от Сахары с очень мелкой сеткой в 1 км. Причина, по которой мы используем такое высокое разрешение, заключается в том, что осадки в Африке в значительной степени образуются в результате так называемых конвективных ливней, которые развиваются в относительно небольших масштабах. С такой мелкой сеткой требуется много вычислительной мощности. WCG очень полезен, потому что мы можем разделить эту огромную задачу на множество маленьких. Каждая задача состоит из запуска модели на небольшой площади 50 на 50 км в течение двух дней. Для всей Африки к югу от Сахары нам нужно 35 609 районов.
> Как на проект повлиял период простоя WCG?
Пока WCG не работал, мы воспользовались возможностью, чтобы поработать над организацией данных, которые уже были там. Каждое моделирование генерирует около 60 МБ данных. Поскольку мы пытаемся запустить полный год, у нас будет 35 609 x 183 = 6 516 447 файлов объемом 390 ТБ. Сделать их доступными — это самостоятельная задача, над которой мы работали во время простоя.
> Чего достигли ваши исследования на данный момент?
Моделирование охватило около 260 дней из 366 дней. Следует отметить, что мы не запускаем прогноз, потому что для запуска модели требуется больше времени, чем в реальном времени. Поэтому мы используем результаты для изучения того, как распределяются осадки и насколько хорошо их можно смоделировать с помощью численных моделей погоды.
> Что могут сделать волонтеры?
Мы надеемся, что такое же количество волонтеров внесет свой вклад, как и до простоя WCG. В этом случае нам потребуется чуть меньше года, чтобы закончить проект.
> Планируются ли какие-либо расширения или новые проекты в ближайшем будущем?
Нам нужно действительно начать внимательно изучать данные, чтобы узнать, насколько хорошо мы можем моделировать погоду в Африке. Это займет много времени, в том числе с учетом огромного количества данных, которые стали доступны благодаря WCG.
___________________________________________________
Спасибо профессору Нику ван де Гейзену за ваш вклад, а также всей команде ARP за их участие в построении лучшего мира. Спасибо волонтерам за то, что позволили осуществить это, казалось бы, невозможное научное исследование. Команда World Community Grid.
Ссылка на оригинал: https://www.worldcommunitygrid.org/about_us/article.s?articleId=775
Пока WCG в отключке, команда ARP, похоже, готова вновь к выдаче заданий волонтерам.
Последние 100 дней проекта «Осадки в Африке»
Мы спросили команду ARP об их последних разработках, и вот что они поделились с нами:
«В рамках проекта «Африканские дожди» было очень тихо, по крайней мере, на начальном этапе. За кулисами были внесены необходимые изменения, чтобы снова начать работать. В предыдущих новостях мы много говорили о задействованных объемах данных, которые действительно впечатляют. Однако это также является серьезной проблемой с точки зрения хранения и перемещения их из одного места в другое. В случае с ARP результаты добровольцев отправляются WCG на компьютеры SURF, совместной организации по информационным технологиям в образовании и исследованиях в Нидерландах. Первые 200 ТБ можно хранить на диске, к которому относительно легко получить доступ. Однако это также была максимально допустимая сумма. Существует также «рабочее хранилище», где можно анализировать и сравнивать результаты. Официально максимально допустимый объем составляет 50 ТБ, но ARP отправил 150 ТБ, поэтому данные нужно было перенести в другое место. В этом случае «где-то еще» было хранилище на магнитной ленте, которое на самом деле по-прежнему является самым дешевым способом хранения данных, но также требует физического перемещения ленточных барабанов к устройствам чтения и записи и обратно. Даже несмотря на то, что эти ленты перемещаются роботом, можно себе представить, что это занимает некоторое время, и можно будет перемещать данные на ленту или с ленты только один раз время от времени. Вероятно, можно было бы дать команду просто скопировать каждый файловый накопитель на ленту, но это, вероятно, где-нибудь застрянет, а также могут быть ошибки транскрипции. Вместо этого мы перемещали данные по одному поколению за раз (т. е. два дня симуляции) и использовали так называемую хэш-функцию, чтобы убедиться, что биты на исходном носителе такие же, как и на новом носителе.
Теперь все это решено, поэтому у волонтеров есть место для дальнейшей деятельности в рамках проекта «Африканские осадки». Теперь у нас есть результаты примерно за 265 дней, и нам бы очень хотелось заполнить весь год последними 100 днями из-за очень сезонного характера осадков в Африке. Близко к экватору обычно бывает два сезона дождей и два засушливых сезона, поскольку зона межтропической конвергенции перемещается вместе с солнцем. На севере и юге обычно бывает один сезон дождей и один относительно продолжительный сухой сезон. Таким образом, полный год действительно увеличивает научную ценность набора данных. Поддержка больших хранилищ со стороны SURF прекратится, но было найдено другое долгосрочное решение, позволяющее ученым продолжать анализировать результаты, чтобы лучше понять погоду в Африке и ее предсказуемость».
Источник: https://www.worldcommunitygrid.org/about_us/article.s?articleId=781