Американский транснациональный инвестиционный банк TD Cowen опубликовал отчёт с прогнозом рекордных показателей на рынке аренды ЦОД в 2023 году в связи с высоким спросом на ИИ-сервисы. Согласно данным TD Cowen, за последние 90 дней было подписано договоров об аренде ЦОД на общую мощность 2,1 ГВт, что связано с ростом популярности ИИ-приложений.

Сообщается, что за последние три месяца Google подписала сделку на аренду ЦОД мощностью 600 МВт в Техасе, в то время как Microsoft подписала сделку на аренду на 420 МВт в Лисбурге (штат Вирджиния), сделку в Далласе на аренду оборудования на 360 МВт и в Чикаго на 300 МВт. По оценкам TD Cowen, мощность ЦОД сторонних компаний в США составляет около 10 ГВт.

Один из операторов сообщил TD Cowen, что объём аренды за последние 90 дней вырос с 500 МВт до более чем 1 ГВт. Гиперскейлеры также начали оформлять предварительную аренду мощностей за 2–3 года до сдачи объекта, тогда как в прошлом году это делали за год-полтора до ввода ЦОД в эксплуатацию. Те, кто сможет предоставить ёмкости в течение 2 лет и менее, теперь могут повышать цены.

Источник изображения: Pixabay

«На наш взгляд, это отражает растущую нехватку мощностей ЦОД, поскольку гиперскейлеры стремятся защитить свой доступ к будущим мощностям», — сообщает TD Cowen. Это также привело к тому, что теперь тоже заранее арендуют мощности за полгода до сдачи объекта, поскольку им приходится конкурировать с гиперскейлерами в борьбе за доступ к ограниченным ресурсам. Поскольку рабочие нагрузки ИИ менее чувствительны к задержкам, их можно размещать в любом регионе страны. Например, NVIDIA планировала арендовать 50 МВт мощностей в Хиллсборо (Орегон), но когда поняла, что это сделать не удастся, сообщила операторам, что готова арендовать ёмкость в любом месте.

Если в 2022 году цены на аренду ЦОД выросли из-за удорожания их строительства, то сейчас они увеличились из-за ограниченного предложения и высокого спроса. Банк также отметил проблемы с цепочками поставок. По его данным, один оператор недавно разместил заказ на генераторы Caterpillar мощностью 3 МВт, срок поставки которых составит 130 недель (~2,5 года), примерно такой же срок поставки и у трансформаторов. И эти сроки, как ожидается, увеличатся, поскольку волна договоров аренды ЦОД, подписанных за последние несколько месяцев, вскоре трансформируется в новые заказы на поставку оборудования.

Согласно данным Synergy Research Group, количество крупных дата-центров, управляемых гиперскейлерами, приближается к 900, и на них сейчас приходится 37 % всей ёмкости ЦОД в мире. Примерно половина этой ёмкости размещена в собственных ЦОД гиперскейлеров, вторая половина — в арендованных.

С учётом того, что на колокейшен-ёмкости, которые не относятся к гиперскейлерам, приходится 23 % от мировой ёмкости ЦОД, получается, что на долю обычных ЦОД приходится всего 40 %. Это резко контрастирует с тем, что было пять лет назад, когда их доля составляла почти 60 %. По оценкам Synergy Research Group, в ближайшие пять лет на гиперскейлеров будет приходиться более половины всех мощностей ЦОД, а на локальные — менее 30 %.

При этом общая мощность всех ЦОД будет продолжать неуклонно расти, главным образом за счёт гиперскейлеров, которые практически удвоят ёмкость своих объектов в течение следующих пяти лет. В то время как доля локальных ЦОД в общей ёмкости будет снижаться более чем на два п.п. в год, фактическая мощность локальных ЦОД уменьшится незначительно. Доля колокации в общей ёмкости останется относительно постоянной.

Источник: Synergy Research Group

Synergy Research Group отметила, что 10 лет назад предприятия ежегодно тратили более $80 млрд на аппаратное и программное обеспечение своих собственных ЦОД, инвестируя менее $10 млрд в зарождающиеся сервисы облачной инфраструктуры. Сейчас же расходы на локальные ЦОД растут в среднем всего на 2 % в год, тогда как расходы на облачные сервисы быстро росли, увеличиваясь в среднем на 42 % ежегодно и достигнув $227 млрд в 2022 году.

По мере того как предприятия радикально пересматривали свои инвестиции в ИТ и сокращали расходы на собственные ЦОД, ведущие провайдеры облачных услуг быстро создавали крупные глобальные сети дата-центров гиперскейл-класса. Дальнейшему росту гиперскейлеров способствовало быстрое развитие более ориентированных на потребителя цифровых сервисов, таких как социальные сети, электронная коммерция и онлайн-игры.

Более того, в то время как компании сохраняли на прежнем уровне или медленно увеличивали расходы на оборудование для ЦОД, всё большая доля этого оборудования перемещалась на колокейшн-площадки. По оценкам аналитиков, корпоративные ЦОД не исчезнут в ближайшее время, но всё больше и больше будут уступать по масштабам гиперскейлерам и колокейшн-провайдерам.

Данные Synergy Research Group по гиперскейлерам основаны на анализе работы ЦОД и деятельности 19 крупнейших мировых компаний, предоставляющих облачные и интернет-услуги, включая крупнейших операторов *aaS, поиска, социальных сетей, электронной коммерции и игр. Данные по колокации и аренде ЦОД Synergy Research Group собраны на основе отчётов по более чем 230 компаниям.

На североамериканском рынке сложилась необычная ситуация — компании, желающие заполучить колокейшн-мощности, столкнулись с тем, что их либо нет совсем, либо за них придётся платить намного больше, чем обычно. По данным Network World, растущие аппетиты гиперскейлеров ставят под вопрос возможность доступа к необходимой инфраструктуре для всех участников рынка.

Как сообщают эксперты datacenterHawk, на долю гиперскейлеров приходится уже 80 % арендуемых в североамериканских ЦОД мощностей. Особенную активность большие игроки демонстрировали в прошлом и позапрошлом годах, забирая почти все доступные мощности. По мнению экспертов, хотя темпы роста на североамериканском рынке замедлились, спрос на мощности ЦОД остаётся рекордным, поскольку на основных региональных рынках свободны лишь 2,88 % мощностей, на вторичных рынках — 5 %.

Источник изображения: TheDigitalArtist/pixabay.com

Другими словами, свободных мест в ЦОД, особенно на крупных рынках вроде Северной Вирджинии или штата Вашингтон, почти не осталось. Если пару лет назад на рынке имелось до 10 провайдеров, способных предоставить до 4 МВт ёмкости, то теперь таковых не более четырёх, а цены выросли на 5–20 %. Причём мощности часто полностью забронированы гиперскейлерами, что не оставляет возможностей более мелким компаниям.

Источник: datacenterHawk

Операторы не могут удовлетворить спрос, и вряд ли свободные ёмкости вскоре появятся. Одна только Серверная Вирджиния обгоняет по ёмкости сверхкрупных дата-центров Европу и Китай. Хотя операторы работают над расширением своей инфраструктуры, ключевые компоненты — землю, энергию и финансирование — в последние два года становится всё труднее получить, так что темпы строительства падают, а его стоимость — растёт. Эксперты предрекают сохранение такого положения в ближайшие 3–5 лет. Многим компаниям приходится просто оптимизировать свои нагрузки или уменьшать их.

Теперь операторы ищут необходимые ресурсы для развёртывания ЦОД за пределами крупных агломераций и даже вне США — индустрия ЦОД в Латинской Америке переживает стремительное развитие. Во многом это обусловлено прогнозируемым постпандемийным ростом внедрения передовых технологий на континенте, что приведёт и к росту спроса на колокейшн-сервисы в Мексике, Бразилии, Чили и Колумбии в следующее десятилетие. При этом страны вроде Мексики будут не только сами потреблять новые мощности, но и, вероятно, обслуживать близлежащие государства.

Российский провайдер IT-инфраструктуры Selectel сообщил итоги 2022 года. За отчётный период выручка компании выросла по сравнению с предыдущим годом на 68 % — с 4,8 до 8,1 млрд руб. Значительный рост доходов был достигнут в основном благодаря повышенному спросу на российские сервисы IT-инфраструктуры и переходу клиентов от зарубежных провайдеров, а также за счёт роста тарифов на основные услуги.

Основную долю выручки (59 %) компании принёс сегмент «Приватные облака на базе выделенных серверов / Bare metal» — 4,8 млрд руб., что на 64 % больше, чем в 2021 году (2,9 млрд руб). Доход увеличился на фоне высокого спроса на серверы произвольных конфигураций со стороны крупных клиентов.

В сегменте «Публичные и приватные облака» выручка выросла на 92 % до 2 млрд руб., главным образом за счёт повышенного спроса на сервисы облачной платформы Selectel. В сегменте «Услуги дата-центров» выручка составила 0,9 млрд руб. (рост — 48 %). Её рост связан в основном с изменением цен на аренду стоек на фоне общего тренда на рынке.

Вместе с выручкой выросла её себестоимость — на 0,8 млрд руб. или на 59 %, главным образом из-за роста фонда заработной платы, доля которого в себестоимости составляет 66 %. Рост связан с индексацией з/п с целью повышения конкурентоспособности Selectel на рынке труда, а также увеличением штата сотрудников. Соотношение суммы затрат к выручке постепенно снижается (29 % в 2022 году, -1 п.п. к 2021 году) благодаря превышению темпов роста выручки над темпами роста себестоимости.

Источник: Selectel

Чистая прибыль Selectel увеличилась в 4,6 раза до 1,4 млрд руб. Рентабельность по чистой прибыли выросла до 17 % с 6 % годом ранее. Показатель EBITDA вырос год к году на 81 % год к году до 4,1 млрд руб. Рентабельность по EBITDA в 2022 году выросла на 4 п.п. до исторического максимума в 50 %. Повышение рентабельности связано с превышением темпов роста выручки над приростом операционных расходов.

Источник: Selectel

В 2022 году компания главным образом инвестировала в серверное оборудование, выделив на это 2,1 млрд руб. или 61 % от общих инвестиций, составив 3,4 млрд руб. Остальная часть в размере 1,3 млрд руб. была направлена на развитие инфраструктуры дата-центров. Несмотря на существенные инвестиции, в 2022 году Selectel впервые вышел на положительный скорректированный свободный денежный поток, что подтверждает устойчивость бизнес-модели компании.

Прошлый год был успешным не только для Selectel, но и для других российских провайдеров облачных сервисов. Квартальная выручка облака Yandex Cloud взлетела в 2022 году на 127 %, а у провайдера КРОК Облачные сервисы выручка выросла на 20 %.

Компания Equinix, известный провайдер колокации и один из крупнейших операторов ЦОД, пообещала «оптимизировать» температуру в своих машинных залах, постепенно увеличивая её, но оставляя в безопасных для оборудования пределах. Как сообщает The Register, это позволит сэкономить немало электроэнергии, снизив затраты на избыточное охлаждение.

Температура +27 °C для машинных залов давно одобрена индустриальными регуляторами и представителями IT-промышленности — ASHRAE указала, что такая температура достаточна для ЦОД ещё в 2008 году. По данным DataCenter Dynamics, в этом же году Intel провела эксперимент, в ходе которого 10 месяцев серверы в ряде ЦОД работали при +33,3 °C. В результате компания на 67 % сократила расходы на охлаждение, но доля отказов оборудования выросла на 2 %. Новейшие спецификации ASHRAE теперь тоже допускают температуры до +33,2 °C.

Источник изображения: Equinix

Впрочем, гиперскейлеры в собственных ЦОД могут позволить себе более высокие температуры, чем обычно. Уже к 2009 году Facebook✴ подняла планку до +29,4 °C, а сейчас добралась и до +32,2 °C. Google долго время придерживалась более умеренных значений, поддерживая температуру +26,6 °C. Однако для операторов ЦОД, сдающих в аренду свои площади, такие показатели нехарактерны. Напротив, зачастую они поддерживают даже более низкую температуру, чем необходимо, чтобы успокоить клиентов, опасающихся перегрева оборудования и сбоев в работе.

Стратегия Equinix предусматривает постепенное повышение температуры до приблизительно +27 °C в течение нескольких лет, что позволит избежать оттока пользователей, придерживаясь при этом последовательной политики. Делается это с целью повышения энергоэффективности охлаждения и снижения углеродных выбросов. Примечательно, что это скажется и на показателях клиентов, чьи углеродные выбросы класса Scope 3, (непосредственно не связанные с их деятельностью), тоже снизятся. Эксперты IDC сообщают, что Equinix способна сыграть ключевую роль в модернизации всей индустрии ЦОД.

Источник изображения: Equinix

По словам Equinix, на охлаждение приходится около четверти всех глобальных расходов компании на энергию. Ожидается, что в некоторых локациях рост энергоэффективности составит до 10 %. Пока в компании не отмечают какого-либо изменения клиентской базы в связи с нововведениями, хотя все клиенты обязательно получат уведомления об изменении политики охлаждения. По мере ужесточения требований клиентам и партнёрам придётся полагаться на Equinix для того, чтобы добиться показателей экоустойчивости в соответствии с новыми стандартами.

Однако на этом пути Equinix ожидает ряд проблем. В частности, не все системы (особенно старые) могут оказаться устойчивыми к росту температуру. Кроме того, новые высокопроизводительные на современных процессорах имеют повышенные требования к охлаждению в связи с выросшим TDP. Так что экономия на охлаждении может привести к перерасходу энергии по причине увеличившегося потребления вентиляторов в шасси.

Schwarz Group, материнская компания европейской сети розничных продовольственных магазинов Lidl, официально объявила о доступности сервисов своего облачного подразделения StackIT для сторонних клиентов. О планах Schwarz Group по оказанию облачных услуг сторонним ретейлерам стало известно в 2020 году после приобретения ею компании Camao IDC, специализирующейся на разработке программного обеспечения.

Сообщается, что Schwarz Group начала работу над облачным сервисом в 2018 году и запустила его для собственных нужд примерно в 2019 году. В ноябре 2021 года Schwarz Group приобрела контрольный пакет акций израильской фирмы по кибербезопасности XM Cyber. До нынешнего дня StackIT предоставляла услуги компаниям Schwarz Group, включая сети супермаркетов Lidl и гипермаркетов Kaufland, компанию по производству продуктов питания Schwarz Produktion и компанию по переработке вторичных отходов PreZero.

Источник изображения: Schwartz Group / StackIT

Помимо услуги колокейшна, StackIT предлагает ряд облачных и инфраструктурных сервисов, включая хранение данных, базы данных, вычислительные инстансы и многое другое. Компания предлагает услуги на базе объекта в австрийском Остермитинге, известного как DC10, и ЦОД в Эльхофене (Германия), известного как DC08.

«Благодаря StackIT впервые становится доступным облачное решение, которое на 100 % “Сделано в Германии” и ориентировано на высокие требования и потребности в безопасности предприятий и организаций государственного сектора», — отметил директор по данным Schwarz Digital Рольф Шуман (Rolf Schumann).