Астрофизики из Массачусетского технологического института и суперкомпьютерного центра Pawsey (Кенсингтон, Австралия) собираются использовать мощный суперкомпьютер Cray Cascade стоимостью $33 млн вкачестве маршрутизатора трафика.
Система Cray Cascade имеет производительность 0,3 петафлопса (300 триллионов операций в секунду), а через год ее увеличат до 1,2 петафлопса. Все ради того, чтобы суперкомпьютер смог справиться с огромными объемами трафика, которые к нему поступят с радиотелескопа. От этого трафика нужно как можно быстрее избавляться, то есть как-то его обработать и отправить получателям.
Суперкомпьютер в данный момент устанавливают в Кенсингтоне, он должен начать работу в конце лета. На него будут поступать данные с 2000 антенн массива Murchison Widefield Array, который является частью гигантского распределенного радиотелескопа Square Kilometer Array (SKA), включающего антенны в Австралии и ЮАР. Один квадратный километр в названии — это эквивалент площади одной гипотетической тарелки, которая бы обеспечила такую же чувствительность, как распределенная сеть из тысяч антенн SKA.
За счет распределенной системы SKA и обработки информации из разных участков в одном центре радиотелескоп можно охватить одновременно беспрецедентно широкий спектр частот от 70 МГц до 30 ГГц, нацелившись на конкретный участок звездного неба. Но такая универсальность имеет и побочный эффект — с радиотелескопа поступает слишком большой объем информации.
Murchison Widefield Array — это малая часть от всего массива SKA, но она уже сейчас генерирует поток данных более 400 мегабайт в секунду (примерно 4 терабайта в сутки). Этот поток передается по оптоволоконной сети National Broadband Network на расстояние 800 км в центр Pawsey, где и ставят сейчас новый суперкомпьютер. Местное хранилище вмещает 3 петабайта. Но им нужно не только хранить поступающие данные, но и направлять их в другие научные учреждения, где займутся дальнейшей обработкой.
Например, в Массачусетском технологическом институте интересуются информацией о Большом взрыве. Соответственно, они не хотят получать 4 терабайта в сутки. Им нужна предварительно отфильтрованная информация. Этим и займется суперкомпьютер, который будет трудиться как маршрутизатор, раздавая получателям те потоки данных, которые им требуются для исследований.
Разработанная специально для SKA система архивирования и хранения данных Next Generation Archive System (NGAS) будет учитывать, где конкретно в мире хранятся какие фрагменты данных, так что их можно будет получать из ближайшего источника.
С момента своего запуска 9 июня радиотелескоп Murchison Widefield Array сгенерировал уже более 150 терабайт данных, еще по 4 терабайта поступает каждый день. Суперкомпьютер нужно запускать как можно быстрее, а то ученые начнут нервничать.
Источник