Новые вызовы для астрономии: колоссальные объемы данных от радиотелескопа SKA

В последние два года новости о создании новых дата-центров для задач ИИ становятся всё более частыми. На этом фоне астрономы, обладающие новейшими инструментами для изучения Вселенной, выглядят обделёнными. Например, радиотелескоп Square Kilometer Array (SKA), расположенный в ЮАР и Австралии, будет ежегодно генерировать до 600 Пбайт данных. Эти данные необходимо не только сохранить, но и эффективно распределить по всему миру. Первичная обработка информации будет проводиться в дата-центрах, расположенных рядом с антеннами, а затем данные будут передаваться на суперкомпьютеры для калибровки. Чтобы обеспечить доступ к данным, планируется создание более 20 региональных дата-центров SKA, включая один в Канаде для Северной и Южной Америки. Новые инструменты, такие как обсерватория имени Веры К. Рубин и космический телескоп Nancy Grace Roman, добавят ещё больше данных в будущем, что потребует значительных вычислительных ресурсов.