Катастрофический пожар, произошедший во вторник на прошлой неделе в сингапурском дата-центре Digital Realty, всё ещё осложняет работу облачных операторов. The Register, в частности, сообщает, что к полноценной работе не может приступить облачный регион Alibaba Cloud — в компании ждут, когда просохнет оборудование, чтобы попытаться восстановить данные.

Согласно данным Alibaba Cloud, миграция и восстановление данных в повреждённом ЦОД SIN11 идёт по плану. Работа облачных сервисов постепенно восстанавливается. В компании подчеркнули, что часть оборудования по-прежнему находится в небезопасной и заблокированной зоне дата-центра. О возможном затоплении ряда помещений пожарные предупредили оператора заранее. Некоторое оборудование требует тщательной просушки до того, как можно будет попытаться запустить его без дополнительной угрозы целостности данных. На их восстановление уйдёт некоторое время. Из-за сбоя Alibaba Cloud, как выяснилось, пострадали и различные сервис-провайдеры, включая Lazada и ByteDance.

Источник изображения: Adam Wilson/unsplash.com

Причиной пожара, вероятно, стало возгорание Li-Ion элементов ИБП. Сообщалось, что для тушения и охлаждения АКБ пришлось задействовать пожарного робота, поскольку аккумуляторы могли повторно воспламениться, взорваться и выделить токсичные вещества. Ситуация усугублялась тем, что АКБ находились на третьем этаже четырёхэтажного ЦОД. Хотя современные нормы Сингапура предписывают размещать ИБП на первом этаже, объект Digital Realty ввели в эксплуатацию задолго до принятия этих норм. Это единственный из трёх кампусов Digital Realty в Сингапуре, созданный на основе уже имеющейся инфраструктуры. Ещё два были возведены с нуля.

Источник изображения: Daan Mooij / Unsplash

Как сообщает Alibaba Cloud, к вечеру злополучного вторника всё ещё звучала пожарная сигнализация, а некоторое сетевое оборудование функционировало со сбоями из-за высоких температур. Клиентов предупредили о возможных сбоях во всех зонах доступности данного облачного региона. В среду большинство облачных сервисов восстановили работу в результате переноса части нагрузок. В пятницу было объявлено, что часть оборудования находится «в стадии безопасной миграции». В субботу уже проводилась подготовка к установке оборудования, включая его сушку.

От грандиозного пожара в своём время пострадал ЦОД OVHCloud в Страсбурге, долгое время оператор разбирался многочисленными претензиями пользователей. В самом Сингапуре после крупного сбоя дата-центра Equinix в прошлом году власти пообещали жёстко отрегулировать деятельность ЦОД и облаков.

10 сентября 2024 года в сингапурском дата-центре Digital Realty SIN11 произошёл пожар, последствия которого ещё предстоит оценить. По информации Datacenter Dynamics, больше всех пострадало облако Alibaba Cloud, одна из зон доступности (Singapore Availability Zone C) которого была развёрнута на базе этого ЦОД. Также пострадали Lazada, ByteDance, Digital Ocean, Coolify и Cloudflare.

Пожар начался во вторник в 7:45 по местному времени. В течение получаса весь персонал был эвакуирован. Причиной пожара предварительно названо возгорание литий-ионных аккумуляторов в ИБП на третьем этаже четырёхэтажного здания. Силы гражданской обороны Сингапура (Singapore Civil Defence Force, SCDF) даже применили автономного робота в попытке охладить аккумуляторные блоки, однако в результате в отсеке и соседних помещениях стала накапливаться вода, из-за чего возник риск коротких замыканий.

В итоге пришлось экстренно отключать питание одного из зданий, что также привели к проблемам с сетевым подключением в соседних зданиях. Работы по тушению и устранению рисков заняли более суток. К вечеру среду пожарные службы всё ещё не пускали в пострадавшие помещения инженеров ЦОД и его клиентов. По словам Digital Realty, сейчас ситуация стабилизировалась, а надёжность конструкций самого здания в результате пожара не пострадала.

Источник изображения: Digital Realty

ЦОД SIN11 Digital Loyang 1 включает четыре здания общей площадью 17 тыс. м². Он был введён в эксплуатацию в 2016 году. Стандарты SCDF требуют, чтобы все системы хранения энергии (Energy Storage Systems, ESS) находились на первом этаже. При этом Digital Realty отметила, что новые правила ввели в действие с 2020 года, через четыре года после запуска SIN11.

Ранее от грандиозного пожара пострадал оператор ЦОД OVHCloud, который долго время разбирался многочисленными претензиями клиентов. Крупнейший в мире инцидент с южнокорейском ЦОД Kakao тоже произошёл из-за Li-Ion аккумуляторов. Весной 2023 года пожар в ЦОД LAX12 той же Digital Realty привёл к приостановке обслуживания части клиентов. А в самом Сингапуре после масштабного сбоя дата-центра Equinix власти пообещали жёстко отрегулировать деятельность ЦОД и облаков.

Китайский оператор China Mobile официально активировал подводный кабель Peace, проложенный между Сингапуром и Францией. По данным Datacenter Dynamics, в посте LinkedIn компания объявила, что кабель протяжённостью 15000 км заработал целиком — это уже третья цифровая магистраль China Mobile, связывающая Азию с Европой после кабелей AAE-1 и SeaMeWe-5.

Кабель имеет 13 посадочных станций в 12 странах, благодаря чему Сингапур связан не только с Европой, но и странами Азии и Африки. Строительство сингапурского участка началось в декабре прошлого года, а завершено в июле 2024-го.

Кабель Peace производства Huawei впервые заработал в 2022 году, связав Марсель (Франция) с Египтом. В 2022 год были построены ответвления в Пакистан и Кению. В феврале 2024 года заработало ответвление в Тунис — совместно с местным подразделением Ooredoo. В том же месяце кабель протянули и на Мальдивы.

Peace управляется гонконгской телеком-компанией PCCW Global и обеспечивает пропускную способность до 96 Тбит/с для сегмента Египет-Пакистан и 192 Тбит/с для средиземноморского сегмента от Египта до Франции. Ёмкость сингапурского фрагмента неизвестна.

Источник изображения: China Mobile International

Сегодня в сингапурском порту Туас имеются посадочные станции для кабелей Indigo-West, IGG System, SeaMeWe-3, SeaMeWe-4, SeaMeWe-5 и Southeast Asia-Japan. В ближайшие три года заработают и другие кабели, включая MIST, INSICA, Asia Direct Cable, Apricot и Bifrost.

Китайский оператор ЦОД GDS Holdings Ltd. намерен привлечь $1 млрд инвестиций для своего подразделения, занимающегося дата-центрами за пределами КНР, преимущественно в Юго-Восточной Азии. По данным Bloomberg, решение было принято на фоне удачного привлечения компанией средств всего несколько месяцев назад. Как сообщают источники, GDS работает с аналитиками, чтобы оценить интерес мировых инвесторов к вложениям в базирующуюся в Сингапуре GDS International.

GDS, акции которой торгуются в Гонконге и Нью-Йорке, в случае успешного получения инвестиций всё равно оставит за собой значительный пакет акций. В этом году GDS уже привлекла несколько сот миллионов долларов для своих операций за пределами Китая, продав долю в GDS International группе инвестиционных компаний Boyu Capital, Hillhouse Investment и Princeville Capital. В ходе раунда серии А компания привлекла $672 млн вместо ожидавшихся $587 млн, в результате чего инвесторы получили 47,3 % акций GDS International.

Источник изображения: Scott Graham/unsplash.com

GDS International со штаб-квартирой в Сингапуре основали в 2022 году. Сегодня она располагает ЦОД суммарной ёмкостью 330 МВт — часть из них уже функционируют, а часть ещё строится. Ещё 330 МВт будет построено в Сингапуре, Гонконге, Джохоре (Малайзия), Батаме (Индонезия) и других регионах.

По данным отчёта GDS за I квартал, её чистый убыток составил ¥345 млн ($47,7 млн). На деле показатели улучшились, поскольку годом ранее в тот же период убыток составил ¥475 млн. Чистая выручка выросла на 9,1 % в сравнении с тем же кварталом 2023 года до ¥2,6 млрд. В этом году акции GDS выросли в цене почти на 20 % в Гонконге, что привело к росту рыночной стоимости до HK$16,8 млрд ($2,2 млрд).

Google заключила довольно необычное 10-летнее соглашение о покупке возобновляемой энергии (PPA) для своих дата-центров в Сингапуре. По данным Datacenter Dynamics, это первый в своём роде вариант PPA, который предусматривает получение возобновляемой энергии из деревянных отходов. Подобная «чистая» энергия будет обеспечивать экобезопасные операции Google в Сингапуре и, в конечном счёте, содействовать достижению компанией нулевого углеродного выброса к 2030 году.

Google заключила контракт с энергокомпанией PacificLight Energy (PLE), которая будет поставлять возобновляемую энергию от электростанции Rexus Bioenergy (Rexus). Сама Rexus утверждает, что её электростанция класса WWtE («отходы древесины в энергию») мощностью 13,2 МВт будет первой в своём роде в Сингапуре.

Источник изображения: Ambitious Studio* | Rick Barrett/unsplash.com

Для питания будут использоваться не подлежащие традиционное переработке древесные остатки. Это и отходы сельского хозяйства, и отходы логистических компаний вроде грузовых поддонов. Этот мусор будет не только сжигаться, но и использоваться для получения биомассы, которая, вероятно, тоже будет источником энергии. Также установка будет связана с системой захвата углеродных выбросов (CO₂). Начало коммерческого использования электростанции запланировано на 2026 год.

Google управляет в Сингапуре тремя ЦОД и недавно выделила ещё $5 млрд на развитие инфраструктуры в стране. С 2019 года в Сингапуре действует мораторий на строительство новых дата-центров — не хватает как энергии, так и места для размещения ЦОД. Впрочем, ранее в этом году было решено «разблокировать» ещё 300 МВт. В PacificLight намерены развивать зелёную биоэнергетику и со временем стать «низкоуглеродной» компанией, что соответствует целям города-государства.

IT-гигант Oracle запустил второй облачный регион в Сингапуре. По данным Datacenter Dynamics, Oracle Cloud Region открыт в ответ на растущий спрос на ИИ и облачные сервисы. А благодаря услуге FastConnect доступна быстрая удобная связь с партнёрскими ЦОД Console Connect, Digital Realty, Equinix и Megaport.

Впервые планы по созданию второго облачного региона обнародовали в апреле 2023 года. Первый был открыт в Сингапуре в ноябре 2021-го и поддерживал более 1 тыс. клиентов из Юго-Восточной Азии, включая Pacific International Lines и Siam Makro. Oracle стремится к развёртыванию минимум двух облачных площадок в одной стране для обеспечения дополнительной надёжности.

Источник изображения: Annie Spratt/unsplash.com

Особо активно развивается в стране Google — с 2011 года она построила три дата-центра и развернула облачный регион, а в прошлом месяце компания завершила очередное расширение инфраструктуры. В 2010 году AWS и Microsoft запустили в Сингапуре свои облачные регионы. В 2018 году AWS добавила третью зону доступности (у Azure изначально были три), а в мае 2024 года выразила готовность потратить $9 млрд на облачную инфраструктуру в стране. В 2022 Microsoft объявила о создании суверенного облака.

Сегодня Сингапур готовится ввести в действие ряд норм, которые затронут облачный сектор. В числе прочего речь идёт о законе Digital Infrastructure Act, который потребует от причастных сторон сообщать о значимых сбоях и киберинцидентах. В 2023 году местные власти рассматривали присвоение дата-центрам и облакам статуса объектов критической инфраструктуры. При этом дальнейшее развитии индустрии ЦОД в стране находится под вопросом.

Американская инвестиционная компания KKR совместно с сингапурской Singtel объединили усилия для вложения $3 млрд сингапурских долларов (чуть более $2,2 млрд) в ST Telemedia Global Data Centres (STT GDC). По данным Forbes, речь идёт о крупнейшей в этом году инвестиции в цифровую инфраструктуру Юго-Восточной Азии — в перспективном регионе активно развиваются технологии ИИ.

В рамках сделки партнёры намерены выкупить на $1,30 млрд погашаемых привилегированных акций STT GDC — правда, компании всё ещё ожидают разрешения местных регуляторов. После полного исполнения обязательств по покупке акций по заранее оговоренной цене компании вложат в сингапурского оператора ЦОД ещё $0,92 млрд, после чего KKR будет владеть 14,1 % компании, а Singtel — 4,2 %.

STT GDC — один из самых быстрорастущих операторов дата-центров. Компания управляет 95 ЦОД общей ёмкостью более 1,7 ГВт на более чем 20 рынках в 11 регионах, включая Азию, Великобританию и континентальную Европу. Предполагается, что беспрецедентный рост облачных и ИИ-бизнесов вместе с вливаниями KKR и Singtel дадут STT GDC толчок к росту на рынке цифровой инфраструктуры. Поступления от инвесторов пойдут на международную экспансию компании.

Источник изображения: Bryan Low/unsplash.com

В феврале 2024 года STT GDC сообщила о готовности многих инвесторов вложить в компанию $1 млрд перед потенциальным выходом на IPO в США или Сингапуре. В мае 2024 года сообщалось, что KKR и Singtel конкурируют за долю в 20 % в STT GDC. Но ST Telemedia, владеющая многими медиакомпаниями в регионе, в любом случае останется мажоритарным акционером. Компания уже анонсировала планы расширения во Вьетнаме и начала строительство третьего ЦОД в Ченнаи (Индия).

KKR активно наращивает инвестиции в дата-центры на фоне растущего спроса на цифровую инфраструктуру для облачных и ИИ-сервисов в Азии. В сентябре 2023 года нью-йоркская компания приобрела 20 % в региональном бизнесе Singtel, связанном с ЦОД — компании Nxera за $0,81 млрд. А сегодня Nxera объявила о заключении партнёрства с Telekom Malaysia с целью постройки нового ЦОД в Джохоре (Малайзия).

Основным акционером сингапурской Singtel является Temasek — крупнейшая телекоммуникационная компания Юго-Восточной Азии с более 780 млн мобильных клиентов в 21 стране Азии, Австралии и Африки. Кроме того, она предоставляет в регионе и другие услуги связи и инфраструктурные сервисы.

В последние месяцы в Юго-Восточной Азии наблюдается бум проектов, связанных с ЦОД. Планы строительства там облачной ИИ-инфраструктуры анонсировали многие IT-гиганты, включая AWS, Google и Microsoft.

По мнению экспертов IT-отрасли, решение Сингапура частично отказаться от моратория на строительство новых ЦОД и «разблокировать» 300 МВт для дата-центров вряд ли принесёт действительно значимые плоды. Datacenter Dynamics ссылается на доклад BMI, не сулящий новой инициативе ничего хорошего.

Сингапур ожидает, что в страну вернутся инвесторы, желающие строить и расширять дата-центры. Хотя в городе-государстве фактически введён мораторий на строительство новых кампусов, некоторые послабления всё же делаются. Высвободить сотни мегаватт для новых проектов поможет переход уже существующих в стране ЦОД на более энергоэффективные «зелёные» технологии. Так, Equinix, Microsoft, AirTrunk и GDS недавно получили разрешения увеличить ёмкость ЦОД всего на 80 МВт.

Источник изображения: R.H. Lee/unsplash.com

Проблема в том, что на роль нового IT-хаба уже претендует соседняя Малайзия, где с энергоресурсами всё значительно лучше, а также другие страны Азиатско-Тихоокеанского региона. В докладе BMI пессимистично прогнозируется, что никакие усилия не помогут Сингапуру вновь привлечь инвесторов. Ключевым перспективным рынком становится именно Малайзия. Отмечается, что многие сингапурские бизнесы сами перенесли свои нагрузки к соседям. Именно поэтому Джохор (Малайзия) и Батам (Индонезия) получили масштабные инвестиции на строительство ЦОД в объёме 1800 МВт и 285 МВт соответственно.

Близость Сингапура и благоприятные условия — от привлекательных законов до стоимости труда и энергии — стали причиной быстрой миграции мощностей за пределы страны, отчаянно пытающейся сохранить лидерские позиции. В BMI утверждают, что новых 300 МВт не хватит для того, чтобы удовлетворить требования пользователей. Близкие развивающиеся рынки Юго-Восточной Азии в краткосрочной перспективе суммарно предложат порядка 2500 МВт.

Впрочем, представленный сингапурским регулятором Infocomm Media Development Authority (IMDA) план развития индустрии предполагает не только увеличение ёмкости за счёт повышения энергоэффективности действующих ЦОД, но и сотни мегаватт от новых источников чистой энергии.

Компания Google объявила о завершении расширения кампуса ЦОД и облачного региона в Сингапуре. По данным Datacenter Dynamics, она вложила $5 млрд в цифровую инфраструктуру города-государства. Для сравнения — в 2018 году заявленный объём инвестиций составлял всего $850 млн.

Глава подразделения Google, занятого «чистой» энергетикой в Азиатско-Тихоокеанском регионе, Джорджио Фортунато (Giorgio Fortunato) заявил, что инвестиции компании будут способствовать экономическому росту Сингапура. К 2030 году местные бизнесы смогут заработать на внедрении ИИ $147,6 млрд. Он подчеркнул, что ЦОД в Сингапуре созданы с использованием передовых технологий вроде эффективных систем охлаждения и управления водными ресурсами.

По данным компании, сегодня в дата-центрах Google в Сингапуре работает 500 человек. Расширение инфраструктуры поможет удовлетворить растущий местный и глобальный спрос на облачные сервисы и станет дополнением к стратегическим ИИ-инициативам, связанным с проектами Google и сингапурских властей. В самой компании заявляют, что расширение ЦОД в Сингапуре подтверждает стремление Google помочь организациям Юго-Восточной Азии инвестировать в цифровые возможности, в то же время гарантируя экобезопасный рост.

Источник изображения: Joshua Ang/unsplash.com

Дата-центры Google работают при относительно высокой средней температуре 27 °C, которая комфортна и для сотрудников, и для оборудования. Утверждается, что местные ЦОД используют системы охлаждения, специально созданные для многократного использования переработанной воды.

Строительство первого ЦОД Google в Сингапуре началось в 2011 году, а эксплуатацию его ввели в конце 2013-го. Над вторым объектом работы начались в 2015 году, а в строй он вступил в конце 2018-го. Первый облачный регион Google запустила в Сингапуре в 2017 году. В 2018 году началось строительство третьего дата-центра, в 2022 году его ввели в эксплуатацию, т.е. на два года позже, чем планировалось, зато теперь это крупнейший дата-центр компании в Сингапуре.

На днях сообщалось, что Сингапур «разблокирует» ещё 300 МВт для новых дата-центров благодаря «зелёным» инициативам. Развиваются и другие проекты в Юго-Восточной Азии. На прошлой неделе Google анонсировала инвестиции $2 млрд в строительство первого ЦОД и облачного региона в соседствующей с Сингапуром Малайзии.

Сингапур рассчитывает дать операторам дата-центров ещё 300 МВт электроэнергии. Хотя в стране фактически действует мораторий на возведение новых ЦОД, ёмкость, по данным The Register, всё-таки будет выделена благодаря оптимизации уже действующих объектов. Ещё 200 МВт добавят за счёт новых «зелёных» энергопроектов. Сегодня в Сингапуре находятся более 70 ЦОД общей ёмкостью более 1,4 ГВт.

С 2019 года здесь фактически действует мораторий на строительство новых дата-центров, хотя уже одобренные проекты разрешено завершить, что, например, удалось сделать Singtel и Keppel. Запрет несколько ослабили в 2022 году — некоторым компаниям позволили подавать заявки на получение новых разрешений, хотя условия получения лицензий значительно ужесточили. Equinix, GDS, Microsoft и консорциум AirTrunk и ByteDance смогли получить одобрение на ввод 80 МВт новых мощностей, а недавно AWS анонсировала планы инвестировать $9 млрд в свои сингапурские ЦОД.

Источник изображения: Jisun Han/unsplash.com

Местный орган Infocomm Media Development Authority (IMDA) представил план по оптимизации энергопотребления ЦОД Green Data Centre Roadmap путём внедрения новых аппаратных и программных решений. Целью заявлено соблюдение климатических обязательств и получение «лишних» 300 МВт в краткосрочной перспективе. Операторы ЦОД должны будут совместно с клиентами увеличить энергоэффективность своих объектов. При этом освобождающиеся ёмкости будут распределять между теми, для кого приоритетными являются «зелёные» проекты, хотя экономическая целесообразность тоже будет учтена.

Речь идёт о более широком внедрении СЖО, отказе от воздушного охлаждения, повышении допустимых температур в машинных залах, использовании различных типов «зелёного» ПО и более современного оборудования. К концу года IMDA обновит стандарт BCA-IMDA Green Mark, ужесточив критерии энергоэффективности дата-центров в целом. К 2025 году будут представлены отдельные стандарты оценки энергоэффективности IT-оборудования и СЖО. В течение ближайших 10 лет PUE всех дата-центров Сингапура должен стать не выше 1,3 при 100 % загрузке, а WUE — быть не хуже 2 м³/МВт∙ч.