Компания Facebook заявила, что основной причиной отказа ее сервисов стало неудачное выполнение плановых работ по техническому обслуживанию. В результате серверы DNS оказались недоступны, но в первую очередь стоит отметить, что из строя вышла вся магистральная сеть Facebook.

Ситуация усугубилась тем, что потеря DNS сделала для инженеров Facebook невозможным получение удаленного доступа к тем самым устройствам, с помощью которых они рассчитывали восстановить работоспособность сети. Пришлось вручную перезапускать системы непосредственно в ЦОДах.

Все это задержало процесс, но он замедлился еще сильнее из-за мер предосторожности, которые затрудняют вмешательство в работу ЦОДов абсолютно всем. «Туда трудно попасть, а оборудование и маршрутизаторы спроектированы таким образом, что их работу трудно модифицировать даже при наличии физического доступа», – пояснил вице-президент Facebook по инфраструктуре и проектированию Сантош Джанардан.

Поэтому вся процедура заняла довольно продолжительное время. Но как только системы были восстановлены, сеть снова заработала.

Восстановление сервисов для клиентов, получающих доступ по сети, тоже длилось достаточно долго, потому что их одновременное включение порождало риск возникновения очередного витка сбоев. «В некоторых ЦОДах снижение энергопотребление измерялось десятками мегаватт, а резкий его рост мог привести к нежелательным последствиям, начиная от отказа электрических систем и заканчивая нарушением кеширования», – добавил Джанардан.

В общей сложности системный сбой Facebook продолжался семь часов и пять минут.

Сбой при проведении планового техобслуживания

При проведении технического обслуживания инженеры Facebook планировали отключить только часть магистральной сети. Но выполнение команды, предназначенной для оценки доступности глобальной магистрали, непреднамеренно привело к разрыву всех соединений с магистральной сетью и отключению всех ЦОДов Facebook.

У Facebook даже есть инструмент, предотвращающий выполнение команд, которые могут привести к таким катастрофическим последствиям, но в данном случае он не сработал. «Наши системы проводят аудит подобных команд, чтобы предотвратить действия такого рода, но ошибка в инструменте аудита помешала остановить выполнение команды», – указал Джанардан.

Когда это произошло, система DNS была обречена.

DNS: единая точка отказа

По словам Анжелики Медины, руководителя отдела маркетинга продуктов Cisco ThousandEyes, отслеживающих интернет-трафик и сбои в работе, автоматическая реакция на магистральный сбой привела к отказу системы DNS.

Система DNS (Domain Name System) отвечает за преобразование имен интернет-доменов в IP-адреса, а у Facebook имеются собственные серверы DNS. «В компании выстроена архитектура, позволяющая масштабировать сервис DNS вверх или вниз в зависимости от доступности сервера, – отметила Медина. – И когда уровень готовности серверов из-за сбоя в сети опустился до нуля, все серверы DNS были выведены из эксплуатации».

Вывод их из эксплуатации осуществлялся принадлежащими Facebook серверами имен DNS, отправлявшими соответствующие сообщения маршрутизаторам BGP (border gateway protocol), в которых хранилась информация о маршрутах, используемых для достижения конкретных IP-адресов. Информация о маршрутах регулярно рассылается на маршрутизаторы, чтобы они были "в курсе" того, как следует правильно распределять  трафик.

Серверы DNS Facebook рассылали сообщения BGP, которые отключали маршруты, делая невозможным прохождение трафика по магистральной сети Facebook. «В результате оказались недоступными даже те серверы DNS, которые находились в рабочем состоянии, – пояснил Джанардан. – И обратиться к нашим серверам из оставшейся части Интернета стало невозможно».

Даже если бы доступ к DNS-серверам из Интернета сохранялся, клиенты Facebook все равно не смогли бы воспользоваться сервисом, поскольку сеть, к которой они пытались обратиться, вышла из строя. К несчастью для Facebook, ее собственные инженеры тоже утратили доступ к серверам DNS, которые были нужны платформе удаленного управления для подключения к вышедшей из строя магистральной системе.

«В Facebook сервис DNS используется не только для веб-ресурсов, преданазначенных на клиентов, – указала Медина. – Она нужна и для внутренних инструментов и систем. При полном ее отключении операторы и инженеры не могут получить доступ к внутренним системам, которые нужны им для устранения сбоя».

Для повышения надежности архитектура должна предусматривать наличие двух сервисов DNS, которые могут заменять друг друга. Например, Amazon Web Services использует для обеспечения резервных мощностей два внешних сервиса – Dyn и UltraDNS.

Уроки

Произошедший инцидент высветил недостатки архитектуры Facebook. «Почему DNS оказалась фактически единственной критической точкой? – спрашивает Медина. – В сложившейся ситуации отказа основного сервиса DNS, даже не затронувшего функционирование резервного сервиса, оказалось достаточно для длительного вывода из строя всей системы. Думаю, наличие дополнительной избыточности в системе DNS стало бы хорошим подспорьем».

Еще одно общее замечание касается всех провайдеров. Зачастую в их сетях так много взаимозависимостей, что даже небольшой сбой в какой-то части  архитектуры сервисов может вызвать эффект домино и привести к самым серьезным последствиям.

«Многие компании используют массу различных внутренних сервисов, вмешательство в которые может привести к непредсказуемому результату, – добавила Медина. – Это касается в основном технического персонала, но на такие моменты тоже следует обратить внимание».

Суперкомпьютер Fugaku, построенный компанией Fujitsu, продолжает оставаться на первом месте в списке 500 самых быстрых суперкомпьютеров в мире. При этом он по-прежнему в три раза быстрее ближайшего конкурента.

В гонке за производительность сохраняется напряженная ситуация. В первой десятке по сравнению с предыдущим рейтингом появился лишь один новичок – Perlmutter, установленный в Национальной лаборатории Лоуренса в Беркли, относящейся к министерству энергетики США. Он вошел в список под номером пять, переместив всех, кто в ноябре 2020 года занимал места с пятого по девятое, на строчку ниже. Ну, а система Dammam-7 покинула первую десятку.

В списке, обновляемом каждый июнь и ноябрь, рост производительности и совершенствование архитектуры суперкомпьютеров отслеживаются начиная с 1993 года. Скорость измеряется на основе бенчмарка High Performance Linpack (HPL), оценивающего, насколько хорошо компьютер решает системы линейных алгебраических уравнений.

Из первой десятки суперкомпьютеров, попавших в последний рейтинг, пять находятся в США, два в Китае и по одному в Японии, Германии и Италии.

Десять самых быстрых суперкомпьютеров рейтинга TOP500, июнь 2021 года

Номер 1: Fugaku

У этой системы скорость оказалась той же, что и в ноябре – 442 PFLOPS. Она построена компанией Fujitsu, имеет 7 630 848 ядер и находится в RIKEN Center for Computational Science (R-CCS) в японском городе Кобе.

Номер 2: Summit

Самая быстрая система в США обладает производительностью в 148,8 PFLOPS, той же самой, что и в ноябре прошлого года. У нее насчитывается 4356 процессорных узлов с двумя центральными процессорами Power9, каждый из которых состоит из 22 ядер, и шестью графическими процессорами Nvidia Tesla V100. Каждый графический процессор оснащен 80 потоковыми мультипроцессорами. Связь между узлами поддерживается с помощью сети Mellanox dual-rail EDR InfiniBand. Система, построенная компанией IBM, развернута в Национальной лаборатории в Окридже министерству энергетики США.

Номер 3: Sierra

Система, архитектура которой очень похожа на архитектуру Summit, продемонстрировала производительность в 94,6 PFLOPS – такую же, что и в предыдущий раз. Она состоит из 4320 узлов, объединяющих два центральных процессора Power9 и четыре графических процессора Nvidia Tesla V100, и установлена в Калифорнии, в Национальной лаборатории Лоуренса в Ливерморе.

Номер 4: Sunway TaihuLight

Эта система сохранила свое место с теми же показателями, что и в предыдущим рейтинге: 93 PFLOPS. Sunway TaihuLight создана на базе процессоров Sunway SW26010 и имеет 10 649 600 ядер. Она была разработана в китайском центре National Research Center of Parallel Computer Engineering & Technology (NRCPC) и развернута в Национальном суперкомпьютерном центре в Уси.

Номер 5: Perlmutter

Единственный новичок в первой десятке построен на платформе HPE Cray Shasta и гетерогенной системы с процессорами AMD EPYC и 1536 ускорителями Nvidia A100. Его производительность составляет 64,4 PFLOPS.

Номер 6: Selene

Располагавшаяся в предыдущем рейтинге на пятой строчке система Nvidia DGX A100 SuperPOD построена на основе процессоров AMD EPYC, ускорителей Nvidia A100 и сети Mellanox HDR InfiniBand. Ее производительность оценивается в 63,4 PFLOPS и установлена она в центре Nvidia в США.

Номер 7: Tianhe-2A

В основе Tianhe-2A (Milky Way-2A) лежат центральные процессоры Intel Xeon и ускорители DSP NUDT Matrix-2000. В системе насчитывается 4 981 760 ядер, что позволяет достигать производительности в 61,4 PFLOPS. Она была разработана китайским национальным университетом оборонных технологий (National University of Defense Technology, NUDT) и развернута в Национальном суперкомпьютерном центре в Гуанчжоу.

Номер 8: JUWELS Booster Module

Система BullSequana является самой мощной в Европе. Она построена на базе процессоров AMD EPYC, в качестве ускорителей используются Nvidia A100, а в качестве сети Mellanox HDR InfiniBand – та же архитектура, что и у системы Selene. Созданная компанией Atos система развернута в Юлихском исследовательском центре (Forschungszentrum Juelich) в Германии.

Номер 9: HPC5

Система PowerEdge Dell при помощи ускорителей Nvidia Tesla V100 и сети Mellanox HDR InfiniBand достигает производительности в 35,5 PFLOPS. Она была установлена итальянской компанией Eni.

Номер 10: Frontera

Благодаря 448 448 ядрам Intel Platinum Xeon система Dell C6420, установленная в центре Texas Advanced Computing Center Техасского университета достигает производительности в 23,5 PFLOPS.

В новейшей редакции рейтинга самых быстрых в мире суперкомпьютеров TOP500, публикуемом два раза в год, лидерство сохранила за собой машина Fugaku, занимавшая первую строчку и в июне. Суперкомпьютер, построенный компанией Fujitsu, по производительности опережает ближайшего конкурента в три раза.

Составители TOP500 заявили, что конкуренция в мире суперкомпьютеров начинает ослабевать. В новой редакции списка 500 самых быстрых в мире машин появилось наименьшее число новых имен за всю историю его публикации. Рейтинг, отражающий самые последние изменения в производительности и архитектуре суперкомпьютеров, публикуется ежегодно в июне и ноябре, начиная с 1993 года. Но даже в нынешней непростой ситуации две новые системы уже с первой попытки сумели занять место в десятке самых быстрых.

В обновленной первой десятке присутствуют два суперкомпьютера, поставляемые в коммерческих, а не в исследовательских целях.

Самая медленная система из первой десятки продемонстрировала в тесте High Performance Linpack (HPL) производительность в 1,32 PFLOPS, что выше соответствующих июньских показателей, которые находились на уровне 1,23 PFLOPS. Тест HPL показывает, насколько хорошо суперкомпьютеры решают системы линейных уравнений с плотной матрицей.

Совокупная производительность всех 500 систем возросла с 2,22 экзафлопса в июне до 2,43 экзафлопса в ноябре.

Что касается стран, доминирующее положение здесь продолжают сохранять США, представленные в первой десятке четырьмя суперкомпьютерами. У Китая имеется две системы, у Германии, Италии, Японии и Саудовской Аравии – по одной.

Первая десятка самых быстрых суперкомпьютеров

Самым быстрым по-прежнему остается суперкомпьютер Fugaku, скорость которого возросла до 442 PFLOPS. Это на 26 PFLOPS быстрее по сравнению с июньскими результатами и в три раза лучше, чем у системы, занимающей вторую строчку в рейтинге. Дело в том, что количество ядер процессоров Arm A64FX увеличилось здесь с 7 299 072 до 7 630 848. Компьютер построен компанией Fujutsu и находится в вычислительном центре института физико-химических исследований RIKEN в японском городе Кобе.

На втором месте с производительностью 148,8 PFLOPS располагается система Summit, построенная IBM для Национальной лаборатории в Окридже. В ней установлено 4356 вычислительных блоков, каждый из которых включает в себя два 22-ядерных процессора Power9 и шесть графических процессоров Nvidia Tesla V100. В общей сложности у компьютера имеется 2 414 592 ядра. Второе место в рейтинге он занимал и в июне.

Третью строчку сохранила за собой система Sierra с производительностью 94,6 PFLOPS в тесте HPL. Ее архитектура аналогична архитектуре Summit. Компьютер оснащен 4320 вычислительными блоками (с 1 572 480 ядрами), объединяющими два центральных процессора Power9 и четыре графических процессора Nvidia Tesla V100.

На четвертом месте находится суперкомпьютер Sunway TaihuLight с производительностью 93 PFLOPS в тесте HPL, оснащенный процессорами Sunway SW26010 и имеющий 10 649 600 ядер. Система была построена в китайском центре NRCPC (National Research Center of Parallel Computer Engineering & Technology) и установлена в Национальном суперкомпьютерном центре в городе Вуси. В июне она занимала пятое место.

На пятой позиции располагается система Selene с модулями Nvidia DGX A100 SuperPOD, объединяющими процессоры AMD EPYC и новые графические процессоры Nvidia A100. Производительность ее по сравнению с предыдущей версией возросла с 27,5 PFLOPS до 63,4 PFLOPS, что позволило ей подняться с седьмой строчки на пятую. Она установлена в американской компании Nvidia и имеет 555 520 ядер.

Шестое место занимает суперкомпьютер Tianhe-2A (Milky Way-2A) с производительностью 61,4 PFLOPS в тесте HPL. Он оснащен процессорами Intel Xeon и ускорителями NUDT Matrix-2000 DSP, располагая в общей сложности 4 981 760 ядрами. Milky Way-2A был разработан в Национальном университете оборонных технологий Китая (National University of Defense Technology, NUDT) и установлен в Национальном суперкомпьютерном центре в Гуанчжоу. В июне он находился на пятой строчке.

Под номером семь дебютировала система JUWELS Booster Module. В машине BullSequana, построенной компанией Atos, используются процессоры AMD EPYC и графические процессоры Nvidia A100. В этом смысле она аналогична Selene. Система, установленная в Юлихском исследовательском центре в Германии, имеет 449 280 ядер и с производительностью в 44,1 PFLOPS является самой быстрой в Европе. Она является частью модульной системы. Второй модуль JUWELS Module на базе Xeon в рейтинге TOP500 фигурирует отдельно под 44 номером. Модули интегрированы при помощи программного обеспечения ParTec Modulo Cluster Software Suite.

Восьмое место занимает система Dell PowerEdge с производительностью 35,5 PFLOPS. Она построена на базе процессоров Intel Xeon Gold и графических процессоров Nvidia Tesla V100, объединяя в общей сложности 669 760 ядер. Это самая мощная система в рейтинге TOP500, используемая в коммерческих целях. Развернута она в итальянской компании Eni и в июне находилась на шестой позиции.

Система Frontera Dell C6420, находящаяся в центре Texas Advanced Computing Center Техасского университета, опустилась с восьмой строчки на девятую. Она оснащена 448 448 ядрами Intel Platinum Xeon и обладает производительностью в 23,5 PFLOPS.

Десятое место, как и седьмое, занимает новая система. Суперкомпьютер Dammam-7 установлен в компании Saudi Aramco в Саудовской Аравии. Система HPE Cray CS-Storm построена на базе процессоров Intel Gold Xeon и графических процессоров NVIDIA Tesla V100. Она имеет 672 520 ядер и демонстрирует в тесте HPL производительность в 22,4 PFLOPS.

Суперкомпьютер, объявленный недавно самым быстрым в мире, опередив предыдущего фаворита по производительности в 2,8 раза.

При выполнении теста High Performance Linpack (HPL), предусматривающего решение сложной системы линейных уравнений, японский суперкомпьютер Fugaku с процессорами архитектуры ARM продемонстрировал результат в 415,5 PFLOPS.

У предыдущего лидера, Summit, производительность при выполнении теста HPL составляла 148,6 PFLOPS. По результатам этого теста осенью прошлого года он занял первое место в списке Top500.

При снижении уровня точности и выполнении задач, решаемых приложениями искусственного интеллекта, максимальная производительность Fugaku достигала экзафлопсного уровня.

Summit занимал верхнюю строчку в последних трех редакциях Top500. Суперкомпьютер Fugaku был собран только 22 мая и ранее не принимал участия в испытаниях. Система, построенная компанией Fujitsu, насчитывает 7 299 072 ядра и развернута в научно-исследовательском институте RIKEN в японском городе Кобе. В семи корпусах института работает около 3 тыс. ученых.

Суперкомпьютер Summit, находящийся в Национальной лаборатории министерства энергетики США в Окридже, насчитывает 2 282 544 ядер IBM Power9 и 2 090 880 ядер Nvidia Volta. Его теоретическая пиковая производительность составляет 187,66 PFLOPS, а энергоэффективность – 11,324 GFLOPS/Вт.

Вместе с Summit на ступеньку ниже опустилоась еще три сверхмощных системы. Третье место теперь занимает машина Sierra, построенная IBM для Национальной лаборатории Лоуренса в Ливерморе. Она включает в свой состав 1 572 480 процессорных ядер IBM Power9 и 1 382 400 ядер ускорителей Nvidia Volta GV100. За последние полгода ее производительность не менялась и составляет 94,6 PFLOPS.

На четвертой позиции расположился Sunway TaihuLight, установленный в Национальном суперкомпьютерном центре Китая в Уси. Его производительность при выполнении теста HPL составляет 93,0 PFLOPS. Примечательно, что чипы ускорителей здесь не используются. В компьютере установлено 40 960 процессоров Sunway 26010, каждый из которых имеет 260 ядер. Энергоэффективность — 6,051 GFLOPS/Вт.

На пятом месте находится Tianhe-2A (Milky Way-2A), система, разработанная Китайским национальным университетом оборонных технологий. Его показатель на тесте HPL, 61,4 PFLOPS, является результатом использования гибридной архитектуры на базе процессоров Intel Xeon и специализированных сопроцессоров Matrix-2000. Он развернут в Национальном суперкомпьютерном центре в Гуанчжоу.

Приход новичков

Следующие две строчки в первой десятке Top500 заняли новички.

На шестой позиции расположился суперкомпьютер HPC5. Как и Fugaku, это новый бренд. Система PowerEdge построена Dell и установлена итальянской компанией Eni. Это самая мощная система в Европе, производительность которой на тесте HPL составляет 35,5 PFLOPS. В качестве ускорителей в ней используются Nvidia Tesla V100, а сетевой шины – Mellanox HDR Infiniband.

На седьмой строчке находится система Selene с процессорами Nvidia DGX A100 SuperPOD, установленная в штаб-квартире компании Nvidia в США. В качестве ускорителей там фигурируют новые процессоры Nvidia Ampere A100, а сетевой шиной служит Mellanox HDR Infiniband. Производительность Selene при выполнении теста HPL составляет 27,6 PFLOPS.

Восьмое место в списке занимает суперкомпьютер Frontera, впервые представленный осенью прошлого года и вошедший тогда в Top500 под номером 5. Система, установленная вы вычислительном центром Техасского университета в Остине, оборудована процессорами Intel Xeon Platinum 8280 и имеет производительность 23,5 PFLOPS.

На девятой строчке расположился четвертый новичок в первой десятке – система Marconi-100, развернутая в исследовательском центре CINECA в Италии. Она оснащена процессорами IBM Power9, графическими процессорами Nvidia V100 и сдвоенной шиной Mellanox EDR InfiniBand. Производительность Marconi-100 составляет 21,6 PFLOPS.

Больше всего суперкомпьютеров у Китая

В первой десятке самых быстрых суперкомпьютеров мира находятся четыре представителя США, по два от Китая и Италии и по одному от Японии и Швейцарии.

Из 500 систем, входящих в Top500, 45,2% принадлежат Китаю и 22,8% США. Далее следуют Япония (5,8%), Франция (3,8%) и Германия (3,2%).

Кто же является лидером по суммарной производительности? Здесь Китай (25,5%) уступает только США (28,7%), далее идут Япония (23,7%), Франция (3,6%) и Германия (3,1%).

Корпорация IBM завершила с Red Hat сделку стоимостью 34 млрд долл., заявив, что будет использовать накопленные гигантом отрасли Linux ноу-хау для реализации более крупных клиентских проектов и создания партнерской сети, которая упростит ей решение этой задачи.

«Многие из наших клиентов заинтересованы в том, чтобы пойти гораздо дальше, – указал в своем блоге старший вице-президент направления IBM Cloud & Cognitive Software Арвинд Кришна. – Многие видят здесь возможность создания крупной отраслевой экосистемы с участием других поставщиков, которые будут оптимизировать общую инфраструктуру… Если бы Red Hat пыталась делать это своими силами, то очень скоро столкнулась бы с ограничениями масштабируемости. Вместе мы сможем выделять значительно больше ресурсов, оптимизируя отношения с другими партнерами».

«Объединенной компании проще будет смягчить недостатки мультиоблачных сред, где каждый поставщик предлагает свое, отличающееся от других решение, – пояснил Пол Кормье, исполнительный вице-президент Red Hat и президент направления продуктов и технологий. – Все облака, даже имеющие одну и ту же базовую технологию, отличаются друг от друга. А поскольку клиенты хотят расширять свое облачное присутствие, возникает потребность в поддержании четырех-пяти разных технологических стеков, которые необходимо разрабатывать и обслуживать. С точки зрения управления, возникает крайне неустойчивая ситуация».

«После объединения двух компаний разработчикам будет проще внедрять свои продукты, – отметил Кришна. – Компоненты восстановления работоспособности, мониторинга, безопасности и аудита редко встраиваются в систему изначально. И, как правило, их нельзя развернуть одним щелчком. Такие конфигурации приходится формировать вручную. Мы же, со своей стороны, должны решать возникающие у клиентов проблемы, упрощая весь этот процесс».

«В более широком смысле IBM надеется создать единую операционную среду Linux, которая будет охватывать любой тип ИТ-инфраструктуры предприятия от оборудования до виртуальных машин и облаков, ¬– подчеркнул Кормье. – Мы рассчитываем решить эту проблему путем формирования общей операционной среды в гибридном и мультиоблачном мире. Выстраивая общую операционную среду, мы поможем не только операторам, но и разработчикам, которые получат единую операционную политику, единую политику развертывания и единую политику безопасности. У них будет одна среда, развернув которую, можно выбрать любой подходящий вариант».

«IBM сохранит присущую Red Hat историческую приверженность программному обеспечению с открытым кодом, – отметил технический директор Red Hat Крис Райт. – Открывая новую главу с IBM, мы продолжим делать то, чем занимались всегда. Мы будем поддерживать сообщества и участвовать в их работе. Будем продолжать реализовывать многочисленные проекты с открытым исходным кодом. А те технологии, которые мы разрабатываем и предлагаем клиентам, по-прежнему будут открытыми».

Объявляя о планах покупки Red Hat в прошлом году, в IBM указали, что ожидают дальнейшего роста популярности облачных сервисов, а предприятия сегодня движутся от использования облака для получения недорогих вычислительных ресурсов в сторону размещения там большего числа приложений.

«Для этого компаниям нужен открытый, гибридный облачный подход к разработке, запуску и развертыванию приложений в мультиоблачной среде», – подчеркивается в заявлении IBM.

Уже больше года IBM и Red Hat сотрудничают в области интеграции своих облачных предложений: платформы частного облака Red Hat Open Stack, Ceph Storage и публичного облака IBM. Первоначальная цель состояла в том, чтобы привлечь клиентов Red Hat путем предоставления им средств управления Red Hat для рабочей нагрузки, размещенной в облаке IBM.

Помимо поддержки гибридного облака ожидаемое слияние предоставит корпоративным разработчикам технологии поддержки контейнеров и Kubernetes, имеющие важное значение для написания облачных приложений.

Покупку Red Hat в IBM назвали крупнейшим приобретением, которое поможет компании расширить свой портфель и объем облачного бизнеса, оцениваемого сегодня в 19 млрд долл., а также закрепиться на облачном рынке с триллионным потенциалом.

Red Hat получит статус самостоятельного подразделения IBM, с тем чтобы сохранить ее лидирующие позиции, возможности и культуру.

HPE покупает легенду суперкомпьютернойт отрасли Cray за 1,3 млрд долл. Эта сделка позволит корпоративным клиентам компаний получать высокопроизводительные вычисления (high-performance computing, HPC) в виде сервиса, поможет выполнять аналитические расчеты для приложений искусственного интеллекта и машинного обучения и обеспечит поддержку высокопроизводительных хранилищ, вычислительных комплексов и программного обеспечения.

Помимо высокопроизводительных вычислений, которые должны дополнить и расширить возможности существующих продуктов HPE, Cray приведет с собой клиентов из правительственных и научных кругов, которые, возможно, проявят интерес и к другим продуктам из существующего портфеля HPE.

Ожидается, что сделка будет завершена в апреле 2020 года.

Высокопроизводительные вычисления в качестве сервиса будут поставляться через HPE GreenLake – сервис компании в публичных, частных и гибридных облаках. «Сервис такого рода поможет удовлетворить периодические потребности предприятий в быстрых расчетах, которые в противном случае могут оказаться слишком дорогостоящими», – пояснил аналитик Gartner Тим Циммерман.

Бизнес может использовать этот сервис, например, для создания цифровых двойников всей корпоративной сети и тестировать там новый программный код, наблюдая за тем, как это отразится на функционировании сети, прежде чем проводить развертывание соответствующих программ на основных ресурсах.

У Cray имеется технология высокопроизводительных вычислений, которую в HPE Labs могли бы создать и собственными силами, но, получив все в уже готовом виде, компания выведет свои предложения на рынок гораздо быстрее.

Покупка Cray поможет HPE получить технологии для массовой интенсивной обработки данных (в частности, в приложениях искусственного интеллекта и машинного обучения), которые используются в инженерных сервисах, финансовых сделках на основе транзакций, фармацевтических исследованиях и научных расчетах при моделировании погоды и генома.

Как отмечают в HPE, суперкомпьютерные платформы Cray позволяют обрабатывать большие наборы данных, проводить конвергентное имитационное моделирование, работать с искусственным интеллектом и решать аналитические задачи.

В настоящее время Cray работает над созданием самого быстрого в мире суперкомпьютера с производительностью в 1,5 эксафлопс, который должен быть готов в 2021 году. Производительность самого быстрого из существующих на сегодняшний день суперкомпьютеров составляет 143,5 PFLOPS.

Компания HPE рассчитывает сформировать всеобъемлющее семейство продуктов, которое будет поддерживать инфраструктуру высокопроизводительных вычислений, в том числе «расчетную, высокопроизводительные системы хранения, межкомпонентные соединения, программное обеспечение и сервисы».

Совместные усилия специалистов двух компаний и объединение их технологий должно способствовать дальнейшему росту инноваций.

В начале мая генеральный директор HPE Антонио Нери заявил, что в ближайшие четыре года компания инвестирует 4 млрд долл. в технологии, содействующие развитию средств связи, безопасности, облачных технологий и анализа. Конкретного упоминания высокопроизводительных вычислений в перспективных планах компании не прозвучало.

Чистая выручка HPE в прошлом финансовом году составила 30,9 млрд долл. Чистая выручка Cray оценивается в 456 млн долл. при валовой прибыли в 130 млн долл.

В рамках сделки HPE выплатит 35 долл. за каждую акцию Cray.

Министерство энергетики США работает над созданием суперкомпьютера, который достигнет эксафлопсного уровняысот – квинтильона (10¹⁸) операций с плавающей точкой в секунду, что поможет ему эффективнее управлять высокопроизводительными вычислениями и искусственным интеллектом.

Развертывание суперкомпьютера Aurora, который проектируется совместно с компаниями Intel и Cray Computing и будет стоить более полумиллиарда долларов, в Аргоннской национальной лаборатории в Чикаго запланировано на 2021 год.

«Aurora и следующее поколение суперкомпьютеров эксамасштаба откроет путь к применению высокопроизводительных вычислений и технологий искусственного интеллекта при исследовании раковых заболеваний и моделировании климата, – указал министр энергетики США Рик Перри. – Инновационные решения, помноженные на мощь эксафлопсов, окажут невероятное воздействие на наше общество».

Планируемые проекты предусматривают разработку методов экстремального космологического моделирования, поиск новых подходов к прогнозированию реакции человеческого организма на лекарства и создание материалов для более эффективных органических солнечных элементов.

Рик Перри: «Инновационные решения, помноженные на мощь эксафлопсов, окажут невероятное воздействие на наше общество»

«Система Aurora выстраивается под средства искусственного интеллекта следующего поколения и призвана ускорить поиск научных открытий за счет совместного решения проблем реального мира с помощью искусственного интеллекта и высокопроизводительных вычислений, – подчеркнул директор Аргоннской лаборатории Пол Киэрнс. – Сюда относятся улучшение прогнозирования возникновения экстремальных погодных условий, ускорение и повышение эффективности лечения, моделирование функционирования человеческого мозга, разработка новых материалов и дальнейшее проникновение в глубину тайн вселенной. Причем все это – только начало».

Основой Aurora станет новое поколение процессоров Intel Xeon Scalable, память Intel Optane DC Persistent Memory, вычислительная архитектура Intel Xe и программное обеспечение Intel One API. Компания Cray со своей стороны предложит высокопроизводительную коммутационную структуру следующего поколения, разрабатывавшуюся под кодовым наименованием Slingshot для платформы Shasta.

Нынешним самым мощным суперкомпьютером (согласно последним семи рейтингам Top500, составляемым раз в полгода) является система Summit с вычислительной мощностью 143,5 PFLOPS. Этот суперкомпьютер также принадлежит министерству энергетики США и размещен в Национальной лаборатории в Окридже. Он содержит 2 282 544 процессорных ядра IBM Power9 и 2 090 880 ядер Nvidia Volta GV100.

Анонс министерством энергетики Aurora за два года до его планируемого появления и ставка на технологию, которая еще только должна получить свое материальное воплощение, призваны усилить позиции США в международной борьбе за обладание самыми быстрыми суперкомпьютерами.

Сегодня Соединенные Штаты удерживают за собой первые две строчки в рейтинге Top500 и еще три в первой десятке, но наибольшее представительство здесь имеет все же Китай. Ему принадлежат 227 из 500 самых мощных суперкомпьютеров в мире.

В связи с публикацией тысяч документов ЦРУ, описывающих методы взлома различных систем, в том числе iOS, Mac OS X, Android, Windows, Linux и Solaris, компаниям придется в очередной раз провести оценку рисков безопасности.

Массиву данных, попавших на WikiLeaks, дали название Vault 7. В нем нет кода самих эксплойтов, но описываются уязвимости, которые в них используются. А эти сведения могут иметь ценность как для специалистов по защите информации, так и для злоумышленников, подчеркивает Джон Пиронти, президент компании IP Architects, предоставляющей услуги по анализу рисков безопасности.

Опубликованные документы позволяют не только получить представление о возможностях и мишенях ЦРУ, полагает Михаил Шаулов, глава отделения Check Point по мобильным и облачным средствам безопасности: «Утечка дает возможность понять, насколько масштабной является деятельность любых подобных организаций в киберпространстве». Теперь корпоративным специалистам по безопасности предстоит оценить, способны ли применяемые ими сейчас средства защитить от всего спектра угроз, которые описываются в появившихся документах. «Важно выяснить, нет ли пробелов», — подчеркивает Шаулов. При необходимости нужно будет внедрить новые средства обнаружения угроз, добавляет Пиронти.

Сам код эксплойтов пока не опубликован, но, учитывая, что уязвимости, которыми они пользуются, возможно, еще не устранены, в компаниях стоит продумать вопрос о внедрении инструментов, рассчитанных на распознавание атак нулевого дня, полагает Шаулов.

В WikiLeaks обещают: сами эксплойты будут раскрыты «с должной ответственностью», так чтобы у разработчиков была возможность подготовить заплаты. Когда это произойдет, специалистам по безопасности нужно будет проследить, чтобы необходимые заплаты были установлены. Но, как показывает практика, этому правилу следуют не во всех компаниях, а значит, новые эксплойты, вероятно, будут использоваться еще долго. К примеру, брешь Heartbleed в криптографической библиотеке OpenSSL, о которой стало известно еще в 2014 году, до сих пор, по данным Check Point, не устранена примерно на 200 тыс. серверов, соединенных с Интернетом.

Как считает Пиронти, на основе описаний на WikiLeaks можно с помощью методов обратной инженерии подготовить атаки новых типов. По его словам, для злоумышленников появившиеся сведения — это «след из крошек, ведущий к мощным эксплойтам», и публикация в целом «значительно облегчает киберпреступникам исследовательскую работу».

В числе опубликованных документов есть один, озаглавленный «Секреты разработки: требования и запреты», которым, по мнению Пиронти, начинающие хакеры могли бы воспользоваться в качестве учебника. В частности, разъясняется, как затруднить жертвам реагирование на инциденты, как проводить криминалистическую экспертизу и как выяснять источник атаки.

Среди приведенных рекомендаций: сведение к минимуму размера двоичного файла, чтобы избежать распознавания, сокрытие похищенных данных с помощью стандартных протоколов, и прекращение сетевых соединений после их использования. Все это азы, но «новичкам в деле взлома они позволят повысить уровень знаний, а опытным хакерам информация из этого раздела поможет сделать атаки более действенными», полагает Пиронти.

В результате утечки атаки станут многочисленнее и разнообразнее, уверен Эрик О'Нил, специалист по вопросам стратегии безопасности государственной инфраструктуры из компании Carbon Black: «Хакеры умелы, но ленивы. Зачем разрабатывать что-то самостоятельно, если можно просто воспользоваться уже доступным и доработать для своих нужд».

Инструментами, описываемыми в документах Vault 7, попытаются воспользоваться не только киберпреступники, но и спецслужбы, добавил он: «Для последних важно разобраться в содержимом утечки».

Не все сведения в Vault 7 свежие, отмечают в «Лаборатории Касперского». Например, по словам специалистов компании, уязвимость heapgrd, упоминаемая в документах, была ранее известна, и ее исправили в продуктах «Лаборатории» еще в 2009 году. «В отчете WikiLeaks упоминаются устаревшие версии нашего ПО, уже несколько лет как не поддерживаемые», — добавили в российской компании.

«Мы стоим на пороге настоящего прорыва, который изменит всю экономику оптической части сетевого оборудования, – заявил он. – Очевидно, что это будет представлять огромный интерес для всех, кто занимается строительством крупных, критически важных сетей».

Главным выигрышем для клиентов станет снижение стоимости передачи трафика в высокоскоростных сетях Juniper при той же пропускной способности. Самой же компании это поможет увеличить маржинальность своих продуктов.

Кремниевая фотоника объединяет интегральные схемы с полупроводниковыми лазерами, что позволяет выпускать чипы, благодаря которым ускорится передача данных между оптическими и электронными сегментами сетей. Как заявляет Juniper, на оптоэлектронные компоненты приходится более половины затрат при создании сетевых систем.

Juniper и Aurrion вот уже более двух лет поддерживают партнерские отношения в области оптоэлектронных технологий, поэтому Рахиму хорошо известны технологии Aurrion, способные, как он полагает, изменить весь ход игры. В Juniper ждали, пока инвестиционные риски снизятся, а потенциал реального прорыва наберет желаемый вес, и только после этого было принято решение о приобретении.

Со временем в компании надеются улучшить экономику высокоскоростных сетей путем разработки и продвижения стандартов, касающихся оптического уровня сетей. Из-за очень малой эффективности при прохождении оптического трафика между оборудованием разных поставщиков, а также между электронным и оптическим уровнями пропускная способность уменьшается на десятки процентов.

«Поскольку сегодня управление и администрирование электронным и оптическим уровнями осуществляется разными командами, и действуют эти команды независимо друг от друга, ресурсы используются недостаточно эффективно, – пояснил Рахим. – Если удастся объединить и оптимизировать эти уровни, а также автоматизировать процедуры, то мы освободим дополнительные емкости, которым отводится очень важная роль в условиях, когда замедляется закон Мура, а в отрасли появляются другие задачи, требующие увеличения производительности».

Такие стандарты не только дадут экономию, но и помогут клиентам избежать привязки к конкретному поставщику и упростят построение сетей на базе оборудования разных поставщиков. Сегодня все происходит не так. «Выбрав какой-то один сетевой элемент, вы вынуждены думать о том, чтобы и все остальные элементы поставлялись той же компанией, поскольку существующий уровень интероперабельности оставляет желать лучшего», – указал Рахим.

Компания Juniper уже занималась проектированием таких мультивендорных сетей для одного из европейских поставщиков услуг, и сегодня эти сети уже введены в эксплуатацию. Имя этого поставщика в компании предпочли не называть, было лишь сообщено, что успешная реализация проекта способствовала стандартизации используемых интерфейсов.

Что касается ближайших перспектив, то в заканчивающемся году Juniper переведет свои коммутаторы на работу в соответствии с централизованной политикой так называемой безопасной структуры. Такая структура является составной частью более крупной сети Juniper Software Defined Secure Network, элементы которой станут собирать информацию, выявлять аномалии и устранять угрозы там, где это имеет наиболее важное значение.

В следующем году Juniper расширит применение таких технологий, охватив ими популярные маршрутизаторы MX, а также оборудование независимых поставщиков.

Недавно Рахим отметил свою вторую годовщину в должности генерального директора Juniper. В общей же сложности он проработал в компании более двадцати лет, с момента ее основания. Одним из основных навыков, приобретенных за эти годы, Рахим называет умение выявлять технологии, на которые компании следует перейти, чтобы улучшить свои продукты и полнее удовлетворять потребности клиентов.

«Не нужно идти вперед слишком быстро, опережая потребности рынка, но и не следует двигаться слишком медленно, с отставанием от его нужд, – пояснил он. – Необходимо искать золотую середину».

Блогер Брайан Кребс заявил, что распределенная атака, нацеленная на отказ в обслуживании, которая обрушилась на его сайт пару недель назадд, скорее всего стала последствием разоблачения им двух израильтян, сделавших заказные DDoS-атаки своим бизнесом.

Восемнадцатилетние Итай Хури и Ярден Бидани были арестованы в Израиле по запросу ФБР через шесть дней после того, как Кребс опубликовал информацию о них в своем блоге.

По мнению Кребса, запись в блоге, сделанная 16 сентября, побудила их сообщников организовать атаку на его сайт с использованием ботнета, охватывающего сотни тысяч, а может, и миллионы взломанных устройств Интернета вещей – главным образом, камер, маршрутизаторов и средств организации цифровой видеозаписи.

В сетевых пакетах, обрушившихся на сайт, содержалась текстовая строка «freeapplej4ck», и она, судя по всему, указывает на одного из двух арестованных израильтян, взявшего себе псевдоним Applej4ck.

Хури и Бидани управляли сервисом vDOS, который предлагал подписку на использование платформы для DDoS-атак стоимостью от 20 до 200 долл. в месяц.

Если подозрения Кребса верны, это означает, что злоумышленники с относительно скромными средствами сумели создать гигантский ботнет из устройств Интернета вещей, генерирующий невероятные объемы трафика DDoS.

Аналогичная атака мощностью 1,5 Тбит/с с использованием армии ботов была совершена на французского поставщика хостинговых услуг OVH. «Ботнет, состоящий из 145 607 камер и устройств цифровой видеозаписи (каждое из которых генерировало трафик объемом от 1 до 30 Мбит/с), совершил DDoS-атаку общей мощностью более 1,5 Тбит/с», – сообщил в своем твите основатель OVH Октав Клаба.

Причем атаки эти, скорее всего, продолжаются. «За последние 48 часов к ботнету присоединились еще 6857 новых камер», – заявил Клаба.

В начале сентября известный эксперт по безопасности Брюс Шнайер предупреждал в своем блоге, что неизвестные группы, судя по всему, систематически проверяют, насколько устойчива к DDoS-атакам ключевая инфраструктура Интернета. Соответствующая информация поступала от компаний, предоставляющих инфраструктуру, но имена их он назвать не может, поскольку общение велось на условиях анонимности.

Похоже, инициаторы атак достигают определенных объемов трафика, после чего все прекращается. Спустя какое-то время атаки возобновляются с той же интенсивностью и постепенно нарастают, что свидетельствует о попытках количественно оценить мощность, которая необходима для блокирования работы каждой из целевых сетей.

Типы атак варьируются, с тем чтобы можно было понять, какие инструменты используют жертвы и насколько они эффективны.

Кто стоит за атаками, неизвестно, но, по мнению Шнайера, это не активисты, не исследователи и даже не криминалитет, а какое-то крупное государство.

«Государственные военные киберкоманды оттачивают свое оружие на случай кибервойны, – пояснил Шнайер. – Все это напоминает программу полетов на большой высоте над территорией Советского Союза, которую практиковали США в годы холодной войны, проверяя возможности и реакцию советских систем противовоздушной обороны».