Корпорация Microsoft в сотрудничестве с Meta✴ представила открытый дизайн серверной стойки нового поколения для дата-центров, ориентированных на задачи ИИ. Спецификации системы, получившей название Mt. Diablo, предоставляются участникам проекта Open Compute Project (OCP).

Отмечается, что инфраструктура ЦОД постоянно эволюционирует, а наиболее значительное влияние на неё оказывает стремительное внедрение ИИ. Тогда как традиционные стойки с вычислительным оборудованием и средствами хранения данных имеют мощность до 20 кВт, при размещении современных ИИ-ускорителей этот показатель исчисляется сотнями киловатт. В результате при развёртывании дата-центров могут возникать различные сложности.

Источник изображения: Microsoft

Идея Mt. Diablo заключается в разделении стойки на независимые шкафы для компонентов подсистемы питания и вычислительного оборудования. То есть, речь идёт о дезагрегированной архитектуре, позволяющей гибко регулировать мощность в соответствии с меняющимися требованиями.

Одним из ключевых преимуществ нового подхода является оптимизация пространства. Утверждается, что в каждой серверной стойке можно размещать на 35 % больше ИИ-ускорителей по сравнению с традиционным дизайном. Ещё одним достоинством названа масштабируемость: конфигурацию стойки питания можно изменять в соответствии с растущими потребностями. Плюс к этому модульная конструкция позволяет реализовывать несколько проектов одновременно.

Отмечается, что в современных системах осуществляется преобразование переменного тока на входах в постоянный ток на выходах с напряжением 48 В. В случае с новым дизайном возможен переход на архитектуру 400 В постоянного тока. Это открывает путь для создания более мощных и эффективных систем ИИ. Однако для внедрения стандарта 400 В потребуется общеотраслевая стандартизация.

Финская Nokia расширила соглашение о поставке ЦОД Microsoft Azure маршрутизаторов и коммутаторов. По данным пресс-службы Nokia, соглашение будет действительно в течение пяти лет. Оборудование Nokia, по словам самой компании, повысит масштабируемость и надёжность ЦОД облака Azure по всему миру.

Финансовые условия соглашения пока не разглашаются, но, по данным Nokia, благодаря сотрудничеству компаний финский вендор сможет расширить присутствие на рынках более чем на 30 стран и усилить свои позиции в качестве стратегического поставщика для облачной инфраструктуры Microsoft.

На уже существующих объектах Azure будет поддерживаться миграция внутренних сетей со 100GbE на 400GbE. Вендор отмечает, что компании, как и ранее, сотрудничают в работе над open source ПО SONiC для маршрутизаторов и коммутаторов ЦОД. В Nokia заявили, что с февраля 2025 года начнёт внедрение платформы 7250 IXR-10e для поддержки многотерабитных сетей в дата-центров Microsoft. Маршрутизатор и коммутаторы, использующие платформу SONiC, будут внедряться на новых площадках ЦОД, что поможет Microsoft справиться с растущим требованиям к объёмам трафика в ближайшие годы.

Источник изображения: Nokia

В Nokia заявляют, что новая фаза сотрудничества повысит масштабируемость и надёжность дата-центров Microsoft Azure по всему миру. По словам представителя Microsoft, в последние шесть лет компания сотрудничала с инженерами Nokia для разработки маршрутизаторов на базе SONiC для содействия экспансии гиперскейлера.

В последние месяцы Nokia заявила о наличии амбиций в индустрии ЦОД. В прошлом месяце глава компании Пекка Лундмарк (Pekka Lundmark) заявил, что вендор видит «важную возможность» расширить присутствие на рынке дата-центров. Также в минувшем сентябре Nokia анонсировала запуск платформы автоматизации ЦОД — Event-Driven Automation (EDA).

Японская энергокомпания Hokkaido Electric Power выразила интерес к перезапуску одного из остановленных ядерных реакторов единственной на Хоккайдо АЭС Tomari Nuclear Power Plant для удовлетворения потребностей в энергии местных ЦОД. По данным Datacenter Dynamics, подготовительные работы близки к завершению.

Об этом объявил генеральный директор Hokkaido Electric Power Сусуму Сайто (Susumu Saito). По его словам, компания завершает процедуры, необходимые для перезапуска реактора Tomari 3 мощностью 912 МВт. Обоснованием необходимости перезапуска является продвигаемый энергетиками тезис о том, что прочие источники энергии на японском рынке недостаточно хороши с точки зрения стабильнности цен и поставок. В свою очередь, по мнению Сайто, атомная энергетика стабильна и обеспечивает низкие углеродные выбросы — это наилучший вариант для энергоёмких ЦОД.

Третий реактор АЭС был выведен из эксплуатации после катастрофы на «Фукусиме» в 2011 году, случившейся после разрушительных землетрясений и цунами — Tomari 3 отключили 5 мая 2012 года. Чтобы развеять опасения экоактивистов и общественности, Hokkaido Electric Power предложила построить из бетона и укреплённого цементом грунта 19-метровую морскую дамбу для защиты реактора от вероятных стихийных бедствий. Проект оценивается в $1,16 млрд, на его реализацию уйдёт около трёх лет.

Источник изображения: Mugu-shisai/wikipedia

Возвращение японских компаний к атомной энергетике — вполне в духе современных трендов на рынке электричества, в первую очередь обусловленного стремительным ростом дата-центров. Ранее сообщалось, что Япония намерена было возобновить работу некоторых реакторов, включая крупнейшую в стране АЭС Kashiwasaki Kariwa мощностью 8,2 ГВт.

Несколько американских гиперскейлеров подписали в 2024 году соглашения о поставках энергии с АЭС. К их числу относится AWS, в марте купившая кампус ЦОД при АЭС, принадлежавший Talen Energy. Microsoft подписала соглашение, предусматривающее перезапуск атомной электростанции Three Mile Island мощностью 837 МВт. Собственные атомные проекты есть у Google и Oracle.

В результате коммунальные компании в США выразили готовность возобновить генерацию энергии с помощью АЭС для удовлетворения спроса ЦОД. Например, компания Vistra объявила о переговорах с несколькими крупными операторами ЦОД для увеличения производительности своих атомных проектов. Месяцем ранее NextEra Energy объявила, что рассматривает возможность перезапуска АЭС Duane Arnold в Айове из-за большого спроса на электричество со стороны ЦОД.

Компания Meta✴ намерена масштабировать свои мощности ЦОД в Луизиане. По последним данным компания планирует построить многомиллиардный дата-центр для ИИ-проектов около города Монро в Луизиане, сообщает Datacenter Dynamics со ссылкой на местные СМИ.

Представитель местных властей Фостер Кэмпбелл (Foster Campbell) подтвердил информацию журналистам USA Today Network и заявил, что компания намерена вложить в проект $5 млрд. О самом проекте пока известно не очень много. Сообщается, что планы строительства кампуса поданы местным властям через дочернюю структуру Meta✴ — Laidley LLC. Проект получил имя Project Sucre. Цитируя официальное уведомление, портал Axiom сообщает, что Meta✴ рассчитывает использовать более 900 га земель сельскохозяйственного назначения за автомагистралью US 183.

Источник изображения: Joe Lavigne/unsplash.com

Как стало известно совсем недавно, именно в Луизиане компания Entergy намерена построить электростанцию на природном газе мощностью 1,5 ГВт, тоже около Холли Ридж, для некого клиента, до сих пор не названного. Предполагается, что этим клиентом и станет Meta✴. Ранее Meta✴ подписала PPA с RWE на 100 МВт энергии солнечной станции в Луизиане, которая должна заработать в 2025 году.

В 2024 году компания анонсировала строительство новых объектов в Индиане, Южной Каролине, Вайоминге, Миннесоте и Алабаме. В этом году она запустила кампус в Теннеси. Также компанию связывают с проектом в Дэвенпорте (Айова), хотя об этом официально и не объявлялось.

Еврокомиссия (ЕК) сообщила о проведении серии внезапных проверок на объектах компаний, занимающихся строительством дата-центров. По данным Datacenter Dynamics, дополнительно комиссия направила организациям официальные запросы на предоставление информации, способной пролить свет на возможные картельные сговоры.

Представители европейских властей опасаются, что компании, возможно, заключили тайные соглашения о недопустимости переманивания сотрудников. Кроме того, не исключены договоры об установлении размеров заработной платы и иных условий труда. В Еврокомиссии не сообщают имена компаний, подвергшихся проверкам. Более того, подчёркивается, что предварительные проверки вообще не означают, что компании точно виновны в сговоре.

Рейды проводились при сотрудничестве с национальными антимонопольными ведомствами стран Евросоюза, но пока держится в секрете даже информация о том, в каких странах проходят проверки. Об ограничении сроков расследования по времени ничего не известно, поэтому нет данных и о продолжительности дальнейших рейдов, как и о том, как долго будут направляться новые запросы.

Источник изображения: Nebius

Представители властей ЕС заявили, что любые компании, связанные с картельными сговорами, могут облегчить свою участь, получив иммунитет от штрафов или их существенное уменьшение, если сами сообщат о подобных сговорах и будут сотрудничать с представителями Еврокомиссии в ходе расследования.

Возможность исполнить гражданский долг есть не только у компаний, но и у частных лиц. Специальный инструмент Whistleblower Tool позволяет анонимно отправлять контролирующим органам зашифрованные сообщения. Сотрудники компаний и другие заинтересованные лица, осведомлённые о картельных сговорах и неформальных соглашениях, связанных с недопущением переманивания сотрудников или сговорах о размерах заработной платы могут анонимно сообщить властям о нарушениях.

Nebius, бывшая материнская компания «Яндекса», объявила о создании своего первого вычислительного ИИ-кластера на территории США. Система будет развёрнута на базе дата-центра Patmos в Канзас-Сити (штат Миссури), а её ввод в эксплуатацию запланирован на I квартал 2025 года.

На начальном этапе в составе кластера Nebius будут использоваться ИИ-ускорители NVIDIA H200. В следующем году планируется добавить решения поколения NVIDIA Blackwell. Мощность площадки может быть увеличена с первоначальных 5 МВт до 40 МВт: это позволит задействовать до 35 тыс. GPU.

По заявлениям Nebius, фирма Patmos была выбрана в качестве партнёра в связи с гибкостью и опытом в поэтапном строительстве ЦОД. Первая фаза проекта включает развёртывание необходимой инфраструктуры, в том числе установку резервных узлов, таких как генераторы. Новая зона доступности, как ожидается, позволит Nebius более полно удовлетворять потребности американских клиентов, занимающихся разработками и исследованиями в области ИИ.

Источник изображения: Nebius

Говорится, что Nebius активно наращивает присутствие в США в рамках стратегии по формированию ведущего поставщика инфраструктуры для ИИ-задач. На 2025 год намечено создание второго — более масштабного — кластера GPU в США. Кроме того, компания открыла два центра по работе с клиентами — в Сан-Франциско и Далласе, а третий офис до конца текущего года заработает в Нью-Йорке.

Напомним, что ранее Nebius запустила первый ИИ-кластер во Франции на базе NVIDIA H200. У компании также есть площадка в Финляндии. К середине 2025 года Nebius намерена инвестировать более $1 млрд в инфраструктуру ИИ в Европе. А около месяца назад компания представила облачную ИИ-платформу с ускорителями NVIDIA H100 и H200.

Компания Entergy предлагает построить в штате Луизиана (США) газовую электростанцию стоимостью $3,2 млрд, которая будет предназначена для прямого снабжения близлежащего дата-центра, сообщает Datacenter Dynamics. Согласно документации, поданной в Комиссию по коммунальным услугам Луизианы (PSC), речь идёт о строительстве электростанции мощностью 1,5 ГВт на участке площадью около 567 га.

Оператор ЦОД, с которым планируется сотрудничество, пока не называется. Entergy утверждает, что реализация проекта станет «переломным моментом» для региона и теперь компания добивается разрешения PSC на строительство электростанции в течение 10 месяцев. В Entergy заявили, что рассматривали альтернативные варианты с использованием для питания ЦОД энергии ветра и солнца, но в итоге всё равно пришли к выводу, что без электростанции на природном газе не обойтись для обеспечения стабильного электропитания.

Источник изображения: Nick Fewings/unsplash.com

Чтобы компенсировать возможные последствия для экологии, оператор ЦОД вместе с Entergy построит солнечную электростанцию в другом месте или подпишет PPA. Также ожидается, что компания внесёт свой вклад в строительство на новой газовой электростанции Lake Charles мощностью 994 МВт, принадлежащей Entergy Louisiana оборудования для захвата и хранения углеродных выбросов.

Инициатива Entergy — лишь одна в череде похожих проектов. Многие коммунальные компании США подчёркивают, что ископаемое топливо всё чаще рассматривается, как вполне допустимый источник энергии из-за растущего спроса со стороны ИИ ЦОД. Некоторые операторы энергосетей в США считают, что в краткосрочной перспективе ЦОД могут получать питание от газовых электростанций на время перехода к использованию источников энергии с низкими выбросами углекислого газа. Это особенно актуально из-за активного развития региональных ЦОД.

В октябре появился отчёт S&P Global, в котором утверждается, что спрос на природный газ для питания ЦОД может вырасти до 85–170 млн м³ в день, поскольку в отрасли отмечаются трудности с поиском источников энергии для внедрения новых ИИ-мощностей. В США довольно гибко относятся к «зелёной повестке» — не так давно сообщалось о возможном строительстве новых АЭС на территории старых атомных и угольных электростанций, а в октябре Штаты впервые выделили средства на перезапуск остановленной АЭС и покупку её энергии.

Foxlink Group (Cheng Uei Precision Industry) открыла крупнейший на Тайване суперкомпьютерный центр Ubilink (Ubilink.AI). По данным DigiTimes, центр предназначен для обслуживания предприятий малого и среднего бизнеса (SME), которые не могут позволить себе собственных вычислительных мощностей.

Хотя основной деятельностью Foxlink является производство разъёмов, компания расширяет бизнес, осваивая решения для управления электропитанием и коммуникаций, а также выпуск энергетических модулей. Центр Ubilink создан дочерней Shinfox Energy совместно с Asustek Computer и японской Ubitus, занимающейся предоставлением облачных услуг.

В Ubitus сообщили, что инфраструктура Ubilink включает 128 серверов Asus, 1024 ускорителя NVIDIA H100 и интерконнект NVIDIA Quantum-2 InfiniBand. Конфигурация обеспечивает до 45,82 Пфлопс (FP64) — система занимает 31-е место в рейтинге TOP500. В будущем станут применять и более современные B100 и B200 — когда те будут доступны. Ожидается, что в 2025 году суммарно будет установлено 10 240 ускорителей H100, B100 и B200.

Представители местных властей уже заявили, что Ubilink существенно улучшит позиции Тайваня на рынке ИИ-вычислений, на котором территория сегодня занимает 26-е место. В Asustek добавляют, что достигнутая производительность в 45,82 Пфлопс заметно превышает плановые 40 Пфлопс. Кроме того, центр имеет PUE на уровне 1,2 — ранее ожидалось, что удастся добиться энергоэффективности лишь на уровне 1,38.

Благодаря использованию опыта Shinfox Energy в области возобновляемой энергетики, Ubilink стал первым в Азии суперкомпьютерным центром, использующим «зелёные» источники энергии — клиенты могут воспользоваться вычислениями без существенного ущерба окружающей среде.

Источник изображения: UBITUS

Предполагается, что Ubilink компенсирует отсутствие мощностей для местных малых и средних компаний, не имеющих доступа к значительным вычислительным ресурсам. Предлагая доступные вычислительные мощности, центр позволяет таким бизнесам расширить свои портфели предложений и конкурировать даже на мировом уровне.

Суперкомпьютер уже востребован местными разработчиками чипов, компаний, занимающихся их упаковкой и тестированием, биотехнологическими бизнесами, а также исследовательскими институтами различной направленности. Из-за высокого спроса Foxlink уже рассматривает вторую и третью фазы расширения проекта.

Разработчик газовых топливных элементов Bloom Energy подписал с одной из крупнейших энергетических компаний США — American Electric Power (AEP) соглашение о поставке твердооксидных ячеек (SOFC) совокупной мощностью до 1 ГВт, которые AEP намерена использовать в качестве ещё одного источника питания ИИ ЦОД. Изначально AEP рассчитывает получить 100 МВт, а в 2025 году заказать ещё одну партию элементов, сообщает Datacenter Dynamics.

Топливные элементы Bloom Energy могут работать на водороде или любых смесях природных газов. Впрочем, на данный момент речь идёт только об использовании природного газа, который не считается в отрасли по-настоящему «зелёным» в отличие от некоторых видов водорода.

Bloom Energy уже заключила несколько знаковых сделок в секторе ЦОД в 2024 году. В июле облачный провайдер CoreWeave сообщил о намерении внедрять топливные ячейки Bloom в Иллинойсе. Ожидается, что система питания на их основе будет готова к сдаче в III квартале 2025 года. В июле же Bloom Energy заключила соглашение на 15 лет о поставке планируемому дата-центру AWS в Кремниевой долине Amazon (AWS) 20 МВт от топливных элементов.

Источник изображения: Bloom Energy

Впрочем, у компании в 2024 году были и некоторые проблемы с реализацией проектов. В июне Amazon отказалась от контракта на покупку ячеек для ЦОД в Орегоне, хотя Bloom Energy в этом не виновата. В 2023 году стороны заключили соглашение, предусматривавшее поставку элементов на 24 МВт. На тот момент их продвигали в качестве локального низкоуглеродного источника питания трёх ЦОД AWS. Однако в данной местности большая часть энергии поступает от ГЭС, поэтому местный регулятор решил, что использование топливных элементов зря приведёт к выбросам, эквивалентным 250 тыс. т CO₂ ежегодно.

Калифорнийский коммунальный оператор Pacific Gas and Electric Company (PG&E) намерен построить в Сан-Хосе кампус из трёх ЦОД с общей подведённой мощностью 200 МВт и внедрить ИИ-оборудование NVIDIA на площадке при АЭС Diablo Canyon, передаёт Datacenter Dynamics.

В рамках совместного проекта PG&E Corporation с застройщиком Westbank в Сан-Хосе появятся три дата-центра и более 4 тыс. единиц жилья. Локальная энергосистема свяжет дата-центры и близлежащие районы, благодаря чему можно будет использовать тепло дата-центров для отопления и подачи горячей воды в соседние здания, что позволит добиться нулевых углеродных выбросов.

Также PG&E объявила о NVIDIA развёртывании ИИ-оборудования NVIDIA и программных ИИ-решений Atomic Canyon на АЭС Diablo Canyon Power Plant. В NVIDIA уже заявили, что внедрение ИИ строго регулируемыми отраслями вроде атомной энергетики открывает новые возможности, а продукты Atomic Canyon будут способствовать росту операционной эффективности отрасли.

В частности, речь идёт о решении Neutron Enterprise на базе семейства ИИ-моделей FERMI компании Atomic Canyon, которые разработаны совместно с учёными Министерства энергетики США. Решение предназначено для ядерных объектов и в основном применяется для работы с документацией. Предполагается, что это обеспечит значительную экономию средств и повысит эффективность и безопасность работы АЭС. ИИ-продукты Atomic Canyon позволят быстрее получать и обрабатывать данные.

Источник изображения: Andrii Ganzevych/unsplash.com

Как отмечает Reuters, решение о внедрении ИИ — не просто дань моде. Станцию уже планировали закрыть, но отложили этот процесс в 2022 году из-за необходимости достижения планируемых показателей «безуглеродности» в штате. В Diablo Canyon насчитывается 9 тыс. различных процедур и 9 млн. документов, многие на микрофильмах. Для того, чтобы PG&E могла сохранить федеральную лицензию на эксплуатацию в течение ещё 20 лет, необходимо сформировать планы управления АЭС с учётом её старения.

Значительную часть информации предстоит получить из документов, подготовленных десятилетия назад. ИИ, обученный на таких документах, поможет найти в огромном массиве необходимые материалы, в том числе на микрофильмах, а в будущем сможет помочь в составлении расписаний обслуживания станции, принимающих в расчёт множество факторов. При этом весь ИИ-комплекс работает автономно и не имеет прямого выхода глобальную Сеть.

АЭС Diablo Canyon Power Plant была запущена в 1985 году. Совокупная мощность двух реакторов Westinghouse составляет порядка 2,25 ГВт. Это единственная оставшаяся в Калифорнии действующая атомная электростанция и она обеспечивает подачу почти 9 % электроэнергии штата, а также 17 % энергии с нулевым углеродным выбросом.