Власти Норвегии, по сообщению ресурса HPC Wire, подписали контракт стоимостью Kr225 млн ($21 млн) с корпорацией HPE, предусматривающий создание нового национального суперкомпьютера A2 (постоянное имя системе дадут позже). Он станет самым мощным в истории страны и значительно ускорит исследования и разработки в различных областях, в том числе в сфере ИИ.

За закупку и эксплуатацию НРС-систем в Норвегии отвечает государственная компания Sigma2 AS. Вычислительные услуги предоставляются в сотрудничестве с университетами Бергена, Осло, Тромсё, а также Норвежским университетом естественных и технических наук (NTNU) в рамках проекта NRIS.

В основу нового суперкомпьютера ляжет платформа HPE Cray EX4000. Известно, что в состав комплекса войдут 76 узлов с четырьмя гибридными суперчипами NVIDIA GH200 (всего 304 ускорителя), 252 узла с двумя 128-ядерными AMD EPYC Turin (64 512 ядер) и 5,3-Пбайт хранилище HPE Cray ClusterStor E1000. Узлы объединит интерконнект HPE Slingshot. Ожидаемая производительность системы составит порядка 10 Пфлопс.

Источник изображения: Sigma2

Монтаж системы планируется выполнить в течение весны–лета 2025 года. Машина расположится в дата-центре Лефдаль (Lefdal Mine Datacenter, LMD), развёрнутом на базе бывшего рудника. Этот объект имеет большую площадь и предоставляет гибкие возможности в плане масштабирования. Новый суперкомпьютер HPE станет первой национальной высокопроизводительной системой, установленной в этом ЦОД.

Источник изображения: Sigma2

Несмотря на то, что готовящийся комплекс будет значительно мощнее высокопроизводительных вычислительных систем Sigma2 предыдущего поколения, его энергопотребление окажется меньше примерно на 30 %. Для охлаждения будет использоваться холодная вода из близлежащего фьорда. Нагретая вода затем может быть направлена на нужды местных предприятий, в том числе, например, рыбных ферм.

Ожидается, что суперкомпьютер сможет удовлетворить потребности Норвегии в НРС-ресурсах в течение следующих пяти лет. Он будет доступен исследователям по всей стране. В дальнейшем суперкомпьютер может дополнительно получить 119 808 CPU-ядер и/или 224 ускорителя. В целом же Норвегия рассчитывает, что современные ЦОД станут для страны «новой нефтью».

Провайдер облачных сервисов CoreWeave официально объявил о планах расширения деятельности на территории континентальной Европы. Datacenter Dynamics сообщает, что компания намерена инвестировать $2,2 млрд в три дата-центра на континенте ещё до конца 2025 года.

Основанная в 2017 году компания, занимавшаяся изначально майнингом и другими блокчейн-технологиями, вовремя переключилась на предоставление облачного доступа к современным ИИ-ускорителям. Компания уже привлекла миллиарды долларов инвестиций и даже взяла немало средств в долг. Сейчас она располагает тремя основными регионами ЦОД: US East в Нью-Джерси, US West в Неваде и US Central в Чикаго (Иллинойс). Также имеются сведения об ещё одном регионе в Рино (тоже в Иллинойсе).

В Европе компания суммарно потратит $3,5 млрд, включая $1,3 млрд на дата-центры в Великобритании. Три новых ЦОД дополнят проекты CoreWeave в этой стране. В компании считают, что Европа станет новым фронтиром для ИИ-индустрии и важной точкой роста самой CoreWeave. По словам представителей оператора, его инфраструктура обеспечит европейскому облачному рынку вычислительные решения и инструменты, необходимые для удовлетворения спроса на ИИ-проекты следующего поколения.

Источник изображения: Coreweave

Хотя подробностей о вложениях известно не так уж много, уже есть данные, что CoreWeave будет инвестировать в кампусы на территории Швеции и Норвегии. Ранее сообщалось, что компания планирует открыть объект и в Испании — она уже искала технического специалиста для работы в ЦОД EdgeConneX в Барселоне. При этом официальных данных о реализации проекта в Испании не поступало.

Шведские власти приветствуют инвестиции в местные ЦОД, предрекая, что они усилят критическую ИИ-инфраструктуру в стране и сами по себе являются свидетельством уверенности бизнеса в шведском технологическом секторе и местном финансовом климате, привлекающем подобные компании. В Норвегии также поддерживают инициативу и, похоже, намерены превратить страну в хаб для технологического развития и реализации ИИ-проектов.

В последние 18 месяцев компания стремительно наращивает арендуемые ёмкости и ранее сообщала, что рассчитывает управлять 14 дата-центрами к концу 2023 года и 28 — к концу 2024. Она уже подписала соглашения с Lincoln Rackhouse, Chirisa, Flexential, TierPoint, Digital Realty и Core Scientific в нескольких штатах США, по всей стране открыты вакансии компании для технических специалистов.

Компания IOEMA Fiber объявила о планах проложить в Северном море подводный кабель с высокой пропускной способностью между Великобританией и Норвегией, который также соединит Нидерланды, Германию и Данию, пишет Datacenter Dynamics.

Кабель длиной 1400 км пройдёт по маршруту, соединяющему Дамптон-Гэп (Великобритания) с Кристиансанном (Норвегия), с тремя ответвлениями к Эмсхавену (Нидерланды), Вильгельмсхафену (Германия) и Блобьергу (Дания). Кабель включает 48 пар волокон со скоростью передачи данных 27–29 Тбит/с на пару при общей пропускной способности кабеля 1,3 Пбит/с.

В Великобритании партнёром IOEMA выступит Colt Technology Service. Кабель выйдет на посадочную станцию (CLS) в Дамптон-Гэп на юго-востоке Англии, которая ранее использовалась для кабелей Tangerine и Pan-European Crossing. В Нидерландах IOEMA сотрудничает с Eurofiber и QTS. Нитка будет выходить на посадочную станцию, где ранее размещался кабель VSNL Northern Europe (TGN Northern Europe), а его конечная точка — ЦОД QTS в Эмсхавене. Eurofiber обеспечит резервную транзитную связь через свою оптоволоконную сеть с Гронингеном, Амстердамом, Франкфуртом, Гамбургом, Роттердамом и Брюсселем.

Источник изображения: IOEMA

В Дании IOEMA сотрудничает с Arelion и разместит кабель на посадочной станции в Блобьерге, где ранее размещалась кабельная система ТАТ-14. В Германии IOEMA сотрудничает с EWE, с которой строит новую посадочную станцию на побережье Северного моря в Вильгельмсхафене. Здесь конечная точка кабеля — новая посадочная станция в кампусе компании Bulk в Кристиансанне, где он будет подключён к оптоволоконным системам Bulk в Норвегии.

По словам технического директора IOEMA, проект находился на стадии планирования с 2019 года. Компания намерена получить финансирование в этом году и начать строительство к 2026 году с последующим вводом в эксплуатацию в конце 2027 года. Он добавил, что компания ищет основного клиента кабельной системы, которая позиционируется как высокопроизводительная замена ряда устаревших кабелей в этом регионе, таких как SeaMeWe-3, TAT-14, CANTAT-3, часть которых уже выведена из эксплуатации, а срок эксплуатации остальных закончится в ближайшие годы.

Компания Green Mountain оштрафована Норвежским управлением водных ресурсов и энергетики (NVE) на NKr2 млн ($188 тыс.) за начало строительства трансформаторной станции Heggvin в норвежском муниципалитете Хамар до получения официального разрешения, передаёт Datacenter Dynamics со ссылкой на Datacenter Forum — провайдер начал работы, когда заявка только рассматривалась местными регуляторами.

Green Mountain сдала первую очередь ЦОД для социальной сети TikTok в конце прошлого года. При этом без небольшого скандала не обошлось — местная компания Nammo, занятая выпуском военной продукции, обвинила TikTok в препятствовании потенциальному расширению оборонных мощностей в связи с нехваткой электроэнергии: новый ЦОД использует все излишки электроэнергии в регионе. Станция Heggvin строится для снабжения очередного дата-центра, клиентом которого снова должна стать TikTok в рамках проекта Project Clover.

Фото: Green Mountain

СМИ сообщают, что в январе 2024 года жалоба на возведение опор, фундаментов трансформаторов и иных построек была подана частным лицом. В результате работы приостановили до получения в феврале соответствующего разрешения, но штраф по-прежнему в силе. Green Mountain заявила, что со штрафом не согласна, но всё равно оплатит его и «выучит урок». В NVE, в свою очередь, отметили, что строительство без разрешения является серьёзным нарушением закона, подрывающим всю систему лицензирования.

В NVE добавили, что уже отмечен рост незаконного строительства, поэтому регулятор отрабатывает контроль над соблюдением требований строителями энергетических объектов. Недавно власти Норвегии заявили, что будут более тщательно регулировать индустрию ЦОД с целью предотвратить превращение страны в хаб криптомайнеров. На аналогичные меры уже пошла соседняя Швеция, где налоговая служба недавно закрыла сразу 18 дата-центров.

Норвежская энергетическая компания Norsk Kjernekraft намерена строить малые модульные реакторы (SMR) для дата-центров. Datacenter Dynamics сообщает, что поможет разгрузить энергетические сети страны. Это особенно актуально на фоне прошлогоднего скандала, когда строящийся для нужд TikTok дата-центр практически «отобрал» энергию у оборонного предприятия.

Часто атомная энергия называется экологически безопасной и подходящей для обеспечения работы ЦОД. SMR в перспективе будут дешевле и проще в строительстве и эксплуатации, чем крупные АЭС, а компании вроде Norsk Kjernekraft готовятся внедрять их непосредственно рядом с кампусами ЦОД. По расчётам последней, в ближайшие годы в Норвегии понадобится дополнительно от 50 до 233 ТВт∙ч, тогда как в 2023 году все электростанции страны поставили 156 ТВт∙ч.

Источник изображения: Michael Fousert/unsplash.com

Уже сегодня норвежские электросети полностью работают на возобновляемой энергии, в основном благодаря гидроэлектростанциям, на которые приходится 88 % поставок электричества в стране, а также ветряным электростанциям. С учётом прохладного климата Норвегия является оптимальным местом для размещения дата-центров.

При этом атомных реакторов там до сих пор нет, но в Norsk Kjernekraft подчёркивают необходимость получения дополнительного электричества в больших объёмах. Вопрос в том, сколько смогут вырабатывать электростанции страны в экоустойчивом режиме. Дело в том, что имеется «потолок» для объёмов именно возобновляемой энергии, поэтому придётся пересмотреть взгляды на энергетику в целом.

В Norsk Kjernekraft заявляют, что установка SMR при дата-центрах высвободит ресурсы магистральных электросетей, сегодня используемых для питания цифровой инфраструктуры. А тепло реакторов можно дополнительно направить на производственные нужды, для захвата углерода, добычи водорода, аммиака и т.н. электротоплива, а также обогрева помещений. Огромным преимуществом является отсутствие необходимости в прокладке к ЦОД серьёзных ЛЭП.

Пока разработчик не сообщает, сколько энергии будут генерировать SMR, как и того, вызвала ли идея интерес у местных операторов ЦОД. Компания предлагает построить до пяти SMR в коммуне Эйгарден (Øygarden) к западу от Бергена. Уже заключена сделка с Rolls-Royce, которая должна будет поставлять реакторы для площадки. Ранее последняя предлагала свои SMR напрямую операторам. Согласно расчётам, электростанция должна заработать в ближайшие десять лет.

Целесообразность использования атомной энергии уже изучается некоторыми операторами ЦОД. Например, в марте 2024 года Amazon (AWS) заплатила $650 млн за кампус ЦОД в Пенсильвании, который строится вблизи АЭС и будет питаться от неё, а Microsoft формирует команду специалистов по атомной энергетике для того, чтобы изучить возможность использования SMR для энергоснабжения собственных ЦОД.

Оператор глубоководных дата-центров Subsea Cloud предложил потенциальным клиентам оценить возможности своего ЦОД в течение 90 дней. Как сообщает The Register, так компания пытается привлечь новых пользователей — если в последние три года дорогостоящие испытания проводились индивидуально, то теперь доступ к необычным дата-центрам упростится.

В Subsea заявляют, её дата-центры имеют на 40 % меньше углеродных выбросов, а операционные расходы для клиентов на 30 % меньше в сравнении с наземными ЦОД. Наконец, затрат энергии и воды на охлаждение вовсе нет. Изюминка Subsea Cloud в том, что компания предлагает не просто подводные, а именно глубоководные (до 3000 м) решения. В 2022 году компания сообщала о внедрении первого коммерческого подводного проекта в районе Порт-Анджелеса (штат Вашингтон), дополнительные ЦОД планировалось развернуть в Мексиканском заливе и Северном море.

Источник изображения: Subsea Cloud

В рамках Project OTTO компания предложит протетсировать возможности своего ЦОД недалеко от юго-западного побережья Норвегии. Первая фаза стартует в октябре. Участникам будут доступны тестовые периоди длительностью 30, 60 и 90 дней. При этом поучаствовать в тестировании можно только один раз — за исключением случаев, когда потенциальные клиенты захотят значительно изменить аппаратную составляющую своего оборудования, что потребует дальнейших тестов. О стоимости тестирования ничего не говорится, но компания предупреждает, что в случае отказать подписать соглашение о дальнейшем развёртывании мощностей продление тестирования не будет доступно.

Базовый модуль Subsea Cloud представляет собой ёмкость размерами 6,1 × 2,6 м, практически тех же габаритов, что и стандартный 20-футовый контейнер — в нём можно разместить до 16 стоек мощностью до 150 кВт каждая (суммарно до 1,5 МВт) или 826 серверов. Для охлаждения используется погружная СЖО. Компания может предоставить клиентам и собственные серверы. В целом конфигурация ЦОД рассчитана на высокоплотное размещение энергоёмких систем, например, для ИИ- и HPC-нагрузок. Срок службы модуля составляет 25–30 лет.

Источник изображения: Subsea Cloud

Подводные ЦОД пытаются внедрять не впервые. Microsoft в течение нескольких лет развивала Project Natick. Этот проект был признан успешным, но коммерциализировать компания его не стала в отличие от аналогичного проекта Highlander в Китае. Одним из сдерживающих клиентов факторов является отсутствие лёгкого доступа к оборудованию в подводных дата-центрах. По словам Subsea Cloud на то, чтобы добраться до модуля и заменить или обслужить серверы, уйдёт 4–16 часов.

В Subsea Cloud рассчитывают на сотрудничество с офшорными ветряными электростанциями — это обеспечит подводным ЦОД удобный доступ к возобновляемой энергии. Кроме того, компания намерена подключать свои подводные кампусы непосредственно к подводным ВОЛС. При этом в компании подчёркивают, что общая стоимость обслуживания значительно ниже, чем у обычных ЦОД. Правда, сама же говорит, что экономически целесообразно развёртывание не менее 20 модулей.

Компания Google, по сообщению Datacenter Dynamics, объявила о начале строительства своего первого кампуса ЦОД на территории Норвегии. Соответствующее заявление на странице в соцсети LinkedIn сделала Тине Ауствол Йенсен (Tine Austvoll Jensen), региональный директор Google в этой скандинавской стране.

В создание нового дата-центра в Шиене Google вложит €600 млн. Реализация проекта «принесёт ряд положительных эффектов», включая создание рабочих мест как на местном, так и на национальном уровне.

Источник изображения: Google / LinkedIn

О планах Google по строительству норвежского кампуса ЦОД впервые стало известно в октябре 2022 года. Ещё в 2019 году компания приобрела около 200 га земли в районе Громстул в Шиене, приблизительно в 140 км к юго-западу от Осло. Местная пресса сообщила, что продавцом был Леопольд Левенскольд (Leopold Løvenskiold), один из крупнейших лесовладельцев Норвегии. Позднее говорилось, что Google для удовлетворения своих потребностей в стране необходимо 240 МВт энергии.

Подробности о новом кампусе пока не раскрываются. Отмечается лишь, что ввести его первую очередь в эксплуатацию планируется в 2026 году: для этих объектов потребуется 120 МВт энергии. Второй этап завершится в 2030-м: к этому времени Google получит ещё 120 МВт.

«Мы с нетерпением ждали, когда Google начнёт строительство своего первого дата-центра в Шиене. Как муниципалитет, мы гордимся тем, что компания выбрала нас для своих крупных инвестиций в Норвегии», — отметил Мариус Рохайм Аарволд (Marius Roheim Aarvold), мэр муниципалитета Шиен.

Microsoft запустила два норвежских облачных региона Azure ещё в 2019 году. Однако с тех пор один из них получил статус зарезервированного региона доступа. У AWS есть edge-площадка в Осло. Ещё один дата-центр возводится для TikTok, что вызвало небольшой скандал. При этом Норвегия намерена стать «фантастической площадкой» для размещения дата-центров.

Мэр Шийенского (Skien) муниципалитета Норвегии опроверг слухи о непомерном энергопотреблении строящегося кампуса ЦОД Google. Как сообщает Datacenter Dynamics, ранее в местных СМИ появились сведения, что компания якобы подала заявку на получение 860 МВт — это около 5 % от энергопотребления всей страны.

Фактически же запрос на 860 МВт был сделан местной сетевой энергокомпанией Statnett исходя из потребностей на протяжении ближайших 20 лет. На долю Google придётся лишь часть выделяемых мощностей. Последняя уже получила 100 МВт и ожидает одобрения выделения ещё 20 МВт на первом этапе строительства. На втором этапе компания рассчитывает получить ещё 120 МВт к 2030 году. Формальный анонс ЦОД состоялся в октябре 2022 года, хотя компания приобрела 200 га ещё в 2019 году.

Источник изображения: Michael Fousert/unsplash.com

По словам местных властей, подготовительные работы на площадке уже ведутся, хотя конкретных сроков завершения строительства никто не называет. Известно, что к строительству привлекли местных консультантов и подрядчиков. Google финансирует основную часть расходов на силовую инфраструктуру, а также занимается вопросами водоснабжения и водоотвода, ливневой канализацией и прокладкой ВОЛС.

В Норвегии аккуратно относятся к распределению доступной электроэнергии. В конце июля оператору Green Mountain разрешили строительство кампуса ЦОД для TikTok, но такое решение вызвало вопросы у норвежских политиков — ставится под сомнение целесообразность выделения электроэнергии для «видео с котами» в условиях её нехватки для других проектов, в том числе оборонного характера.

В Норвегии получил «зелёный свет» проект строительства местной компанией Green Mountain кампуса ЦОД для платформы TikTok. Как сообщает DataCenter Dynamics, такое решение уже вызывает вопросы норвежских политиков не только с точки зрения безопасности данных — ставится под вопрос целесообразность выделения электроэнергии социальной сети в условиях её нехватки для других приоритетных проектов, в том числе оборонного характера.

Новость о намерении Green Mountain построить три блока ЦОД общей мощностью 90 МВт для TikTok появилась в марте. Ожидается, что уже к ноябрю 2023 года строительство будет закончено в норвежской коммуне Хамар, а в дальнейшем ожидается увеличение ёмкости до 150 МВт. Тем не менее, перспективы дальнейшего расширения под вопросом, поскольку против этого выступают политики, а сейчас ещё и готовится ужесточение правил строительства и эксплуатации ЦОД в стране. Но Green Mountain преисполнена оптимизма и утверждает, что проверка властями безопасности проекта прошла успешно.

Источник изображения: Green Mountain

Green Mountain даже нашла преимущества в том, что новый кампус подпадает под действие местного Закона о безопасности (Security Act) — он будет подвергаться усиленному регулированию и контролю с точки зрения безопасности и будет классифицирован как один из элементов ключевой инфраструктуры страны. Правда, теперь ЦОД станет объектом пристального внимания в рамках реализации Закона о безопасности. Так, Green Mountain будет получать советы в сфере обеспечения безопасности, доступ к засекреченной информации об угрозах и уязвимостях, а также профильную экспертную поддержку.

Впрочем, политики раскритиковали строительство ЦОД для TikTok из-за уже существующих в стране проблем с энергетикой, поскольку требуется развитие реального производства параллельно со снижением выбросов — вместо этого ресурсы тратятся на «видео с котами». Более того, в Норвегии заявляют, что местный производитель боеприпасов ещё в марте заявил, что не смог расширить производство из-за строительства ЦОД TikTok, «оттянувших» на себя всю доступную энергию.

В самой TikTok принимают отчаянные меры для того, чтобы сохранить присутствие в США и Европе. Так, все данные европейских пользователей уже в этом году начнут хранить в двух дата-центрах в Дублине, а в Соединённых Штатах на базе мощностей американской Oracle реализуется инициатива Project Texas — здесь намерены хранить данные американцев.

Норвежско-финская компания Nammo, специализирующаяся на производстве боеприпасов, реактивных двигателей и космического оборудования, обвинила сервис TikTok в препятствовании потенциальному расширению её мощностей в связи с нехваткой электроэнергии, поскольку новый ЦОД, назвавший китайскую компанию своим основным клиентом, использует все излишки электроэнергии в регионе. «Мы обеспокоены тем, что нашему будущему росту мешает хранение видео с кошками», — сообщил ресурсу Financial Times исполнительный директор Nammo.

Норвежский оператор ЦОД Green Mountain строит для TikTok новый кампус: к ноябрю 2023 года будут возведены три 30-МВт модуля, а к 2025 году планируется достроить ещё два таких же блока. Строительство ведётся в Хамаре, в 25 км от Рауфосса, где находится завод Nammo. Местная энергетическая компания Elvia подтвердила, что в энергосети нет свободных мощностей, они распределяются в порядке очереди и уже обещаны TikTok.

Изображение: Green Mountain

Nammo заявила, что спрос на артиллерийские снаряды сейчас в 15 с лишним раз выше, чем ранее. По её словам, Европа должна инвестировать €2 млрд в новые заводы только для того, чтобы удовлетворить спрос Евросоюза и других стран: «Мы видим необычайный спрос на нашу продукцию, которого никогда не было в нашей истории». В сложившейся ситуации это идёт в разрез с планами Норвегии стать «фантастической площадкой» для размещения дата-центров.

Местные власти сообщили, что будут способствовать реализации планов Nammo по расширению, так как обеспечение возможности развития компании — в национальных интересах. Глава Nammo указал на необходимость установления приоритетов в отношении того, какие отрасли будут иметь особый доступ к энергии. «Для Европы это серьезная проблема касательно промышленности: критически важные отрасли должны иметь доступ к энергии», — заявил он.

Эксперты прогнозируют обострение борьбы за приоритетный доступ к энергии по всей Европе. Если раньше ЦОД имели возможность пользоваться в скандинавских странах дешевым электричеством, получая выгоду от более холодного климата, позволяющего снизить затраты на охлаждение, то в связи с переходом на экологически чистую энергию компании аккумуляторного сектора и сталелитейной промышленности тоже устремятся в северные страны. А это повлечёт за собой рост конкуренции за доступ к энергии.