Компания Blackstone Inc., управляющая активами на сумму более $1 трлн, совместно с инвестиционным подразделением пенсионного фонда Canada Pension Plan согласились приобрести у Macquarie Group Ltd. и PSP Investments австралийского оператора дата-центров AirTrunk за AU$24 млрд ($16,1 млрд). Пока что сделка ожидает одобрения регулятора Australian Foreign Investment Review Board. Это одна из крупнейших сделок этого года, связанных с цифровой инфраструктурой.

По данным Bloomberg, сделка покрывает долговые обязательства приобретаемой компании и обязательства по капитальным затратам на строительство запланированных ЦОД. Это крупнейшее приобретение Blackstone в Азиатско-Тихоокеанском регионе за всю историю существования компании. Компания предложила наибольшую «ставку», потеснив конкурентов, включая DigitalBridge Group Inc., Global Infrastructure Partners, IFM Investors Pty и Silver Lake Management. До этого крупнейшей сделкой в регионе была покупка Blackstone австралийского оператора казино Crown Resorts Ltd. в 2022 году за AU$8,9 млрд (около $6 млрд).

Источник изображения: Scott Graham/unsplash.com

AirTrunk управляет дата-центрами в Австралии, Сингапуре, Гонконге, Японии и Малайзии. Инвестиционное подразделение Macquarie Group взяло контроль над компанией в 2020 году в сделке, оценивавшейся в AU$3 млрд. До этого компания принадлежала группе инвесторов, включая специальное подразделение Goldman Sachs Group Inc. Blackstone уже имеет портфолио ЦОД на сумму более $55 млрд и активно развивает его — компания намерена потратить на это направление бизнеса ещё $70 млрд.

В последние годы активы вроде дата-центров, вышек мобильной связи и оптоволоконных сетей стали востребованными среди инвесторов, поскольку они обеспечивают стабильную доходность и имеют большие перспективы роста — человечество становится всё более зависимым от технологий.

Две компании намерены заняться строительством в Северной Дакоте (США) ИИ ЦОД. Datacenter Dynamics сообщает, что на августовском заседании местной Комиссии по коммунальным услугам (Public Service Commission) к властям со своими предложениями обратились представители крупного бизнеса. Ёмкость проектов составит от 500 МВт до 1 ГВт, но со временем может вырасти до 5–10 ГВт.

Реализация каждого проекта обойдётся в $125 млрд. Хотя имена компаний не раскрываются, обе описываются источниками СМИ, как бизнесы с рыночной капитализацией в «триллионы» долларов. Таких компаний не так уж много. В частности, речь может идти об NVIDIA, Amazon, Microsoft, Google, Meta✴ и Apple.

В марте 2024 года Microsoft совместно с OpenAI изучала возможность строительства 5-ГВт кампуса за $100 млрд. Проект Stargate на тот момент не ассоциировали с конкретным местом, не было и информации о чипах, которые намерены использовать компании. Издание The Information утверждает, что одной из компаний, намеренной построить ЦОД в Северной Дакоте, является именно Microsoft — губернатор штата Даг Бургум (Doug Burgum) ранее был одним из топ-менеджеров гиперскейлера.

Источник изображения: Intricate Explorer/unsplash.com

В Комиссии говорят, что интерес к проектам ИИ ЦОД вырос. Сейчас ведутся переговоры с компаниями, наиболее агрессивно реализующими подобные проекты, поэтому штат должен упростить компаниям перезонирование земель и получение доступа к электроэнергии, иначе высок риск потери инвестиций. При этом в Северной Дакоте, по данным Data Center Map, в штате всего семь кампусов ЦОД. Однако именно здесь всего за четыре года рост энергопотребления дата-центрами составил 37 %, говорится в июльском докладе Управления энергетической информации (Energy Information Administration, EIA) США.

В штате действует криптомайнинговый оператор Applied Digital, получивший в июне $200 млн инвестиций на строительство ЦОД в Северной Дакоте. Компания заключила сделку с неизвестным гиперскейлером, который займёт мощности на расширенном объекте компании. Северная Дакота — один из немногих штатов, генерирующих больше энергии, чем тратит сам, и третий по величине добытчик сырой нефти в стране. Комиссия округа Мортон (Morton County Commission) намерена обсудить возможный мораторий на строительство ЦОД в своих границах.

Компания Infinity Turbine представила систему Cluster Mesh Power Generation System, преобразующую тепло серверов ИИ ЦОД в электроэнергию. Datacenter Dynamics сообщает, что новинка позволит генерировать «чистое» экобезопасное электричество, которое можно будет тут же использовать на месте, а также снизит потребности ЦОД в воде для охлаждения.

Система объединяет малые модульные ORC-турбины (Organic Rankine Cycle), использующие в качестве рабочего тела сверхкритическую жидкость CO₂, в mesh-сеть, благодаря чему обеспечиваются масштабируемость, надёжность и высокая эффективность, говорит компания. Каждый турбинный генератор требует 100 тыс. BTU (British thermal unit) тепла для производства до 5 кВт электроэнергии.

Источник изображения: Infinity Turbine

Согласно расчётам компании, комплекс из 600 турбин может отводить 60 млн BTU/час, генерировать до 3 МВт и экономить до 108 тыс. л/час (из расчёта 1,8 л на 100 тыс. BTU). А ежегодная экономия на расходах на воду может достигать почти $1,9 млн (из расчёта $2 за каждый м³). Правда, пока неизвестно, применялась ли Cluster Mesh Power Generation System хотя бы в одном ЦОД.

Компания признаёт, что изначальные расходы на установку её решения будут выше, чем в случае традиционных систем охлаждения и захвата тепла, но в долгосрочной перспективе они окупаются с лихвой. Кроме того, для достижения эффективности и стабильности работы mesh-сети турбин требуется продвинутая система управления. С другой стороны, каждая турбина работает независимо от других, что упрощает процесс обслуживания и ремонта.

Исландский оператор дата-центров atNorth объявил, что его следующий дата-центр, крупнейший для компании на сегодняшний день, будет использовать избыточное тепло для создания больших теплиц и отопления домов. По данным The Register, новый кампус DEN02 разместят возле датского аэропорта Биллунн (Billund).

Кампус предназначен для выполнения интенсивных вычислений для клиентов вроде гиперскейлеров и компаний, работающих с ИИ- и HPC-нагрузками. На момент открытия в 2026 году ёмкость кампуса должна составить 250 МВт, в перспективе она может масштабироваться и дальше. Как и другие операторы ЦОД, atNorth ищет источники возобновляемой энергии для обеспечения своих объектов. В случае с DEN02 речь, вероятно, будет идти о солнечных и ветряных электростанциях в окрестностях объекта.

Источник изображения: atNorth

Как и многие современные проекты экоустойчивых ЦОД, новая инициатива atNorth будет учитывать возможность использования «мусорного» тепла, тем более что среднегодовая температура в Дании составляет около 8˚C. План будет реализован при содействии компании Wa3rm, специализирующейся на «циркулярных промышленных проектах», а тепло DEN02 будет использоваться для выращивания овощей.

Также имеются планы обеспечить отоплением и горячей водой местных жителей, но atNorth сообщила журналистам, что пока ведутся только переговоры с потенциальными клиентами. В компании отметили, что DEN02 может стать эталоном для будущих ЦОД. Предполагается, что высокая энергоэффективность и использование технологий захвата тепла вкупе с выгодным географическим положением в Дании и приверженностью компании к достижению экоустойчивости, является примером для всей индустрии ЦОД. Дания может стать идеальным место для гиперскейлеров и ИИ-бизнесов, стремящихся к декарбонизации своих проектов.

В последние года схемы использования тепла ЦОД весьма распространены, особенно в Европе, где европейская Директива по энергетической эффективности (European Energy Efficiency Directive или EED) требует от операторов ЦОД использовать лучшие отраслевые технологии для достижения энергоэффективности. Впрочем, ассоциация TechUK ранее в этом году предупредила о потенциальных недостатках практики использования тепла ЦОД в районных системах отопления из-за относительно низких температур теплоносителей и отсутствия точных данных о том, сколько именно тепла будет вырабатываться вообще.

О том, что использование тепла не всегда оправдано, говорят и другие исследования. Но всё это не помешало реализации проектов вроде гронингенского в Нидерландах, а также отдельных проектов Google, Microsoft и Yandex в Финляндии. Самым необычным, пожалуй, является проект в Японии (Хоккайдо), где для охлаждения IT-инфраструктуры используется снег, а полученная тёплая вода используется для разведения угрей на продажу.

Компания Innodisk анонсировала модуль памяти CXL (Compute Express Link), разработанный с прицелом на системы ИИ и облачные дата-центры. Массовые поставки изделия планируется организовать в I квартале 2025 года.

Спрос на ИИ-серверы быстро растет. Согласно прогнозам Trendforce, в 2024 году такие системы займут примерно 65 % глобального рынка серверов (в деньгах). По словам Innodisk, сейчас ИИ-системам требуется не менее 1,2 Тбайт оперативной памяти для эффективной работы. Традиционные изделия DDR не всегда способны удовлетворить предъявляемые требования, что приводит к таким проблемам, как недоиспользование ресурсов CPU и увеличение задержек, говорит компания. Модули CXL призваны устранить подобные ограничения.

Источник изображения: Innodisk

Напомним, CXL — это высокоскоростной интерконнект, обеспечивающий взаимодействие хост-процессора с акселераторами, буферами памяти, устройствами ввода/вывода и пр. Решение Innodisk использует интерфейс PCIe 5.0 x8 и имеет ёмкость 64 Гбайт. Модуль обеспечивает пропускную способность до 32 Гбайт/с. Говорится о совместимости с CXL 1.1/2.0. Устройство выполнено в форм-факторе E3.S 2T и оснащено коннектором EDSFF 2C. Диапазон рабочих температур простирается от 0 до +70 °C.

Отмечается, что в случае установки четырёх модулей Innodisk CXL на 64 Гбайт каждый в сервер, который несёт на борту восемь DIMM по 128 Гбайт, общий объём памяти может быть увеличен на четверть, а общая пропускная способность — на 40 %. При этом CXL обеспечивает пулинг памяти, что позволяет оптимизировать совместное использование ресурсов и повысить общую эффективность системы.

Топ-менеджеры OpenAI, включая гендиректора Сэма Альтмана (Sam Altman), провели ряд встреч с потенциальными инвесторами с целью заручиться поддержкой в создании многомиллиардной IT-инфраструктуры, необходимой для ускоренного развития ИИ, сообщило агентство Bloomberg. Обсуждения проходят в преддверии нового многомиллиардного раунда финансирования OpenAI, который, как ожидается, возглавит венчурный фонд Thrive Capital при участии Microsoft, Apple и NVIDIA. После завершения раунда оценка рыночной стоимости стартапа может превысить $100 млрд.

По данным Bloomberg, Альтман провёл начало года, добиваясь одобрения правительством США своего плана по формированию коалиции глобальных инвесторов с целью финансирования дорогостоящего проекта. А в настоящее время он и его команда занимаются проработкой деталей своей инициативы. В частности, обсуждаются такие направления как строительство ЦОД, увеличение мощностей источников энергии и систем её передачи, а также расширение производства полупроводников.

Источник изображения: Markus Winkler / Unsplash

Группа поддержки проекта, как сообщается, скорее всего, будет включать инвесторов из Канады, Кореи, Японии и ОАЭ и иные частные компании. Крупнейший инвестор производителя ChatGPT, компания Microsoft, может стать одним из его потенциальных партнёров. В Microsoft не стали комментировать конкретно этот проект, но заявили, что компания участвует в любых инициативах OpenAI, направленных на укрепление инфраструктуры.

С целью продвижения сделки топ-менеджеры OpenAI провели ряд встреч. Директор по стратегии OpenAI Джейсон Квон (Jason Kwon) провёл переговоры с инвесторами в Японии и Корее. Вице-президент OpenAI по глобальной политике Крис Лихейн (Chris Lehane) пообщался с инвесторами в Канаде. А Альтман провел дополнительные переговоры с инвесторами в ОАЭ, с которыми уже общался ранее, сообщили источники. Также он общался с инвесторами из США.

Источник изображения: Jakub Żerdzicki / Unsplash

Отвечая на вопрос о планах по развитию инфраструктуры, представитель OpenAI заявил, что компания «считает, что создание дополнительной инфраструктуры в США имеет решающее значение для дальнейшего развития ИИ и обеспечения широкого доступа к его преимуществам». По словам источника, знакомого с планами Альтмана, тот считает, что не только OpenAI, но и другие компании получат выгоду от инфраструктурных проектов, равно как и страны-союзники США. Дополнительным преимуществом станет создание рабочих мест для реализации проектов, дополняющих «Закон о чипах и науке» (CHIPS and Science Act).

Но глобальные амбиции OpenAI могут вызвать опасения по поводу национальной безопасности США, поскольку потенциальные инвесторы — ближневосточные суверенные инвестиционные фонды — известны связями с Китаем. Во всяком случае, в последние месяцы OpenAI проводила встречи с Советом национальной безопасности США (NSC) по поводу планируемых инвестиций. В ходе этих переговоров, а также встреч с рядом официальных лиц США, руководители OpenAI подчёркивали, что инициатива поможет укрепить геополитическое преимущество Америки, создав многонациональную коалицию для конкуренции с китайскими структурами. В противном случае иностранный капитал получат китайские ИИ-проекты.

Усилия Китая, направленные на достижение технологического суверенитета в сфере полупроводников, не всегда полностью успешны. Как сообщает Financial Times, клиенты часто жалуются на различные проблемы с ИИ-ускорителями Huawei, которая сама считает их достойной альтернативой продуктам NVIDIA в условиях антикитайских санкций со стороны США и их союзников.

Huawei лидирует на китайском рынке ИИ-чипов. Ускорители Ascend активно используются местными компаниями и государственными структурами как минимум для инференса. Однако некоторые китайские эксперты утверждают, что китайская продукция всё ещё сильно отстаёт от решений NVIDIA. В частности, работа чипов нестабильна, они используют довольно медленный межчиповый интерконнект и сопровождаются некачественным базовым ПО CANN, а использовать Ascend для обучения моделей по-прежнему затруднительно.

Программная платформа CUDA считается одним из ключевых факторов успеха NVIDIA. Huawei пытается создать альтернативу CUDA. Правда, пока на CANN жалуются даже некоторые сотрудники Huawei, в частности, на плохую документацию, что затрудняет поиск ошибок и проблем. Кроме того, некоторые пользователи сообщают о слишком частом выходе чипов из строя. Вместе с тем Huawei гораздо более тесно сотрудничает с клиентами, чем NVIDIA. Китайская компания готова на месте помогать клиентам с переносом решений с платформы CUDA на CANN, а команды специалистов Huawei уже прописались в Baidu, iFlytek и Tencent.

Источник изображения: Huawei

По имеющимся данным, из 207 тыс. сотрудников китайской компании, более половины работают в сфере R&D, куда относятся и специалисты, направляемые для отладки технологий на территории клиентов. Другими словами, в отличие от NVIDIA у Huawei большая команда специалистов поддержки, готовых оперативно устранять возникающие у клиентов проблемы. Кроме того, у Huawei есть специальный портал для отзывов разработчиков, связанных с улучшением программной экосистемы.

По данным источников издания, после того как США ужесточили санкции, Huawei подняла стоимость чипов Ascend 910B на 20–30 %. Кроме того, клиенты обеспокоены ограниченными объёмами поставок — имеющиеся в Китае мощности не могут работать в полную силу из-за санкций, мешающих покупать оборудование для выпуска чипов, например, у ASML.

В то же время дела у Huawei идут хорошо — в компании отмечают сильный спрос на ИИ-чипы, а в I выручка выросла на 34 %. Правда, статистику представили без разбивки по направлениям бизнеса. Летом на конференции World Artificial Intelligence Conference представители Huawei объявили, что на чипах Ascend обучено и протестировано более 50 ИИ-моделей. Например, iFlytek заявила, что её модель обучена исключительно на ускорителях Huawei, хотя и не без помощи последней.

Вместе с тем ещё в прошлом году китайские компании стали массово скупать урезанные версии ускорителей NVIDIA (A800 и H800), предназначенные для рынка КНР, в ожидании очередной волны санкций со стороны США. А Tencent даже похвасталась, что смогла накопить достаточно ускорителей для дальнейшего развития ИИ-проектов. При этом для NVIDIA рынок Китая по-прежнему крайне важен, поэтому она готова выпускать всё новые и новые варианты ускорителей специально для него.

В последние пару лет Китай вложил более $6,1 млрд в развитие сети дата-центров в стране, передаёт Reuters со ссылкой на данные недавно сформированного Национального бюро информации (National Data Bureau), которое подчиняется Национальной комиссии по развитию и реформам КНР (National Development and Reform Commission, NDRC). Ещё $28 млрд вложили частные инвесторы. Всего же, по оценкам NDRC, на развитие новой сети ЦОД может потребоваться до $63 млрд ежегодно.

По данным на конец июня 2024 года, крупные инвестиции были сделали в рамках проекта Eastern Data, Western Computing, стартовавшего в 2022 году. В его рамках предполагается строительство крупных кампусов ЦОД в западных регионах страны, где есть много доступной и дешёвой энергии, и перенос туда обработки данных из густонаселённых восточных провинций.

Источник изображения: Becca Tapert/unsplash.com

Новые крупные кампусы ЦОД построены в регионе Внутренняя Монголия, провинциях Нинся, Ганьсу, Гуйчжоу, регионе Пекин-Тяньцзинь-Хэбэй, а также в дельте Янцзы и других территориях. Ожидается, что помимо «национальных вычислительных хабов» планируется строительство и десятков небольших ЦОД, уточняет уточняет DataCenter Dynamics. Всего введено в строй 1,95 млн стоек, из которых 63 % уже используются.

Китай наращивает инвестиции в свои вычислительные проекты невзирая на ужесточение санкций со стороны США. Вашингтон запретил продавать в Китай передовые чипы, а также другие компоненты и оборудование для их производства, готовятся и новые ограничения в сфере суперкомпьютеров. Представители США утверждают, что ограничения призваны помешать Китаю разработать чипы для ИИ-систем и реализовать военные программы. Также КНР обвиняют в нарушении прав человека. В числе попавших под запрет компонентов — передовые ускорители NVIDIA, а также оборудование для производства чипов, в первую очередь компании ASML из Нидерландов. Впрочем, в последнее время неоднократно сообщалось, что Китай добился больших успехов в создании собственных решений в полупроводниковой отрасли.

Компания ATP Electronics представила индустриальные SSD семейства N651Sie с интерфейсом PCIe 4.0 x4 (NVMe), построенные на основе чипов флеш-памяти TLC NAND. Устройства будут предлагаться в вариантах исполнения M.2, U.2 и E1.S: в первом случае вместимость варьируется от 120 Гбайт до 1,92 Тбайт, в двух других — от 480 Гбайт до 7,68 Тбайт.

Для всех новинок предусмотрены опции с разным показателем DWPD (полных перезаписей в сутки) — 1, 2 и 5. Диапазон рабочих температур простирается от -40 до +85 °C. На аппаратном уровне реализована защита от потери питания (HW PLP). Имеется поддержка TCG Opal 2.0 и функции безопасного удаления информации Secure Erase. Предусмотрено специальное покрытие для защиты от негативных воздействий окружающей среды.

Скорости последовательного чтения и записи у накопителей стандарта M.2 достигают 6450 и 6050 Мбайт/с соответственно, у версий U.2 — 6000 и 5500 Мбайт/с, у E1.S — 6100 и 6000 Мбайт/с. Величина IOPS (операций ввода/вывода в секунду) при произвольном чтении/записи — до 1100 тыс. / 1250 тыс. (М.2), до 820 тыс. / 1200 тыс. (U.2) и до 870 тыс. / 1200 тыс. (E1.S).

Источник изображения: ATP Electronics

Данные на накопителях гарантированно сохраняются без повреждений в течение года при температуре 55 °C. Показатель MTBF (средняя наработка на отказ), по заявлениям ATP Electronics, превышает 3 млн часов. Максимальное энергопотребление при чтении информации в зависимости от варианта исполнения и вместимости варьируется от 9 до 14,5 Вт, при записи — от 11,5 до 17,5 Вт. На устройства предоставляется пятилетняя гарантия.

Французская Legrand приобрела две компании, связанные с индустрией ЦОД и кабельным бизнесом. По данным Datacenter Dynamics, компания купила колумбийскую UPSistemas и австралийскую Australian Plastic Profiles (APP). В Legrand сообщают, что речь идёт уже о четвёртом приобретении связанных с дата-центрами бизнесов за год. Ранее она уже приобрела компании Netrack, Davenham и Vass.

UPSistemas специализируется на системной интеграции, пусконаладочных работах, обслуживании и мониторинге технических инфраструктурных проектов, в частности для дата-центров. Компания базируется в колумбийской столице Боготе и насчитывает более 300 сотрудников, ежегодная выручка составляет около $33 млн.

Источник изображения: TheDigitalArtist/unsplash.com

APP представляет собой австралийскую компанию по выпуску решений для кабель-менеджмента для всех типов зданий. На неё работают около 250 человек, ежегодная выручка превышает $110 млн. Как заявляют в Legrand, покупка APP «удваивает» присутствие компании в Австралии и сделает её ключевым игроком на австралийском рынке продукции соответствующего профиля.

В Legrand отмечают высокий рост бизнеса за счёт сделок. Семь последних сделок обеспечат компании более $386 млн годового дохода. Импульс к развитию сохранится и в ближайшие кварталы. Компания продолжит усиливать позиции, приобретая всё новые бизнесы, говорит глава Legrand.