В скором будущем в Итальянских Альпах появится уникальный подземный дата-центр, который разместят в действующей шахте, где до сих пор ведётся добыча доломита, а в выработанных штольнях по соседству хранятся яблоки, вино и сыр. По данным Университета Тренто, ЦОД начнёт предоставлять колокейшн-сервисы уже в 2026 году.

Проект будет реализован университетом совместно с компанией Trentino DataMine. Также в нём примут участие Covi Costruzioni, Dedagroup (Deda), GPI Group и ISA-Istituto Atesino di Sviluppo. Ёмкость Intacture составит 5 МВт, объект будет вмещать около 1220 стоек. Реализация обойдётся в €50,2 млн. Из них €18,4 млн будет получено от государства в рамках плана Recovery and Resilience Plan (NRRP), а остальное предоставят частные инвесторы.

Источник изображений: Trentino DataMine

ЦОД построят в горе Валь-ди-Нон в 40 км от Тренто. Строительство идёт в шахте компании Tassullo, ведущей доломитовые разработки. Подобные проекты в мире реализуют довольно редко, поскольку дата-центры нуждаются в инфраструктуре: хороших дорогах, доступном электричестве, чистой воде и др. При этом подземный ЦОД имеет ряд преимуществ в сравнении с надземным — это устойчивая температура круглый год, возможность фрикулинга, защита от неблагоприятных погодных условий и даже электромагнитных импульсов и т.д. У таких ЦОД высокий потенциал энергоэффективности и экономичности в целом.

По словам представителя Trentino DataMine, шахта Сан-Ромедио, где разместят ЦОД, обеспечивает максимальную физическую защиту, в том числе от сейсмических и гидрогеологических рисков. Кроме того, можно экономить более 25 % электроэнергии в сравнении со средними показателями по Европе, и до 40 % в сравнении со средиземноморскими странами. Кроме того, не потребуется занимать земельный участок, поскольку более 80 % конструкций ЦОД разместятся в недрах горы. PUE будет не выше 1,25.

Пока строительство ЦОД Intacture находится на первом этапе. Авторы проекта в Trentino DataMine уже видят превращение дата-центра в «зелёный» инновационный хаб, не только для региона, но для всей страны. Не исключается предоставление и других услуг помимо колокации, в том числе для исследований в сфере естественных наук, ИИ, «энергетического перехода» и обеспечения кибербезопасности.

О намерении построить ЦОД близ Тренто сообщалось ещё в 2023 году, но официально объявили о его реализации только в начале октября уже после начала работ. Хотя для гиперскейлеров ёмкости этого ЦОД слишком мало, для местных проектов он способен обеспечить вполне подходящую площадку — в регионе имеется ВОЛС подключения объекта к дата-центрам Милана.

В Сент-Луисе (штат Миссури, США) появилось предложение о сдаче подземного дата-центра, расположенного в бывшем правительственном бункере. По данным Datacenter Dynamics, бункер по адресу 3280 McKibbon Road сдаётся на условиях договора типа Triple Net (NNN), при котором арендатор несёт полную ответственность за расходы на объект, включая не только собственно арендные платежи, но и все эксплуатационные и коммунальные расходы, налоги на имущество и страхование.

Бункер площадью 351 м² имеет фальшпол для собственно ЦОД и офисных помещений. Есть два резервных генератора, а питание обеспечивается от трёхфазной сети. В объявлении об аренде указывается, что объект был построен в качестве правительственного бункера на случай чрезвычайных ситуаций на данной территории.

Источник изображения: LoopNet

Помещения расположены под землёй, возведены из усиленного бетона. Объект защищён от ядерных ударов, неблагоприятных природных условий и ЭМИ-импульсов. В здании расположены системы обеспечения дополнительной надёжности. Другими словами, подобный «осколок» Холодной войны может быть вполне востребован и сегодня. Объект построен в 1976 году, находится в «хорошем состоянии» и готов к размещению клиентов. Утверждается, что он идеально подходит на случай создания центра хранения и восстановления данных и защиты от катастроф различного характера.

Это уже не первый случай, когда ЦОД создают в бывших военных и правительственных бункерах. Такими пользуются даже преступники — несколько лет назад в Германии местные силовые ведомства взяли под контроль крупный узел «даркнета», который тоже размещался в бывшем подземном убежище НАТО. В итоге восемь местных операторов получили тюремные сроки.

Власти Норвегии, по сообщению ресурса HPC Wire, подписали контракт стоимостью Kr225 млн ($21 млн) с корпорацией HPE, предусматривающий создание нового национального суперкомпьютера A2 (постоянное имя системе дадут позже). Он станет самым мощным в истории страны и значительно ускорит исследования и разработки в различных областях, в том числе в сфере ИИ.

За закупку и эксплуатацию НРС-систем в Норвегии отвечает государственная компания Sigma2 AS. Вычислительные услуги предоставляются в сотрудничестве с университетами Бергена, Осло, Тромсё, а также Норвежским университетом естественных и технических наук (NTNU) в рамках проекта NRIS.

В основу нового суперкомпьютера ляжет платформа HPE Cray EX4000. Известно, что в состав комплекса войдут 76 узлов с четырьмя гибридными суперчипами NVIDIA GH200 (всего 304 ускорителя), 252 узла с двумя 128-ядерными AMD EPYC Turin (64 512 ядер) и 5,3-Пбайт хранилище HPE Cray ClusterStor E1000. Узлы объединит интерконнект HPE Slingshot. Ожидаемая производительность системы составит порядка 10 Пфлопс.

Источник изображения: Sigma2

Монтаж системы планируется выполнить в течение весны–лета 2025 года. Машина расположится в дата-центре Лефдаль (Lefdal Mine Datacenter, LMD), развёрнутом на базе бывшего рудника. Этот объект имеет большую площадь и предоставляет гибкие возможности в плане масштабирования. Новый суперкомпьютер HPE станет первой национальной высокопроизводительной системой, установленной в этом ЦОД.

Источник изображения: Sigma2

Несмотря на то, что готовящийся комплекс будет значительно мощнее высокопроизводительных вычислительных систем Sigma2 предыдущего поколения, его энергопотребление окажется меньше примерно на 30 %. Для охлаждения будет использоваться холодная вода из близлежащего фьорда. Нагретая вода затем может быть направлена на нужды местных предприятий, в том числе, например, рыбных ферм.

Ожидается, что суперкомпьютер сможет удовлетворить потребности Норвегии в НРС-ресурсах в течение следующих пяти лет. Он будет доступен исследователям по всей стране. В дальнейшем суперкомпьютер может дополнительно получить 119 808 CPU-ядер и/или 224 ускорителя. В целом же Норвегия рассчитывает, что современные ЦОД станут для страны «новой нефтью».

Тепло расположенного в Бохуме (Германия) ЦОД планируется хранить в заброшенной шахте и в дальнейшем использовать в районной системе отопления. По данным Datacenter Dynamics, проект местного Рурского университета призван продемонстрировать потенциал теплоаккумулятора Mine Thermal Energy Storage (MTES). Проект финансируется в рамках поддерживаемой Евросоюзом схемы PUSH-IT, рассматривающей подземные объекты в качестве экоустойчивых хранилищ энергии.

Университет управляет собственной теплоэлектростанцией с 2019 года. Станция имеет два комбинированных тепловых/электрических модуля общей мощностью 9 МВт и три газовых котла с общей теплоотдачей 105 МВт. ТЭС не только обогревает университетский кампус, но обеспечивает энергией 5 тыс. квартир, 760 частных домов и 115 промышленных зданий. Оператором выступает Unique Wärme — совместное предприятие университета и коммунальной компании Stadtwerke Bochum, частично принадлежащей местным властям.

Источник изображения: Robert Thiemann/unsplash.com

При этом энергомодули расположены непосредственно над шахтой Мансфельд (Mansfeld) глубиной до 120 м, которая была закрыта в 1963 году. MTES позволит летом отправлять избыточное тепло дата-центра и других технических объектов университета в подземные глубины с помощью тепловых насосов. Там оно будет храниться в скважинах, откуда его по мере необходимости можно возвращать в систему отопления, когда спрос особенно высок, т.е. зимой.

MTES, как ожидается, может увеличить использование источников возобновляемой энергии и сгладить пиковые нагрузки в системе отопления в зимние месяцы. Это, в частности, приведёт к снижению углеродных выбросов и стоимости эксплуатации. По данным координаторов PUSH-IT, MTES пока находится на стадии разработки, а создание экспериментальных скважин предусмотрено осенью.

Похожий проект разрабатывается в стенах Эдинбургского университета, где «мусорное» тепло суперкомпьютерного ЦОД также предлагается сохранять в старой шахте до того, как использовать его для отопления местных домов. Такая схема позволит обогревать не менее 5 тыс. домов, если расчёты учёных подтвердятся. Впрочем, воду из подземных выработок можно использовать и просто для охлаждения дата-центров.

Расположенный в Германии бункер, ещё не так давно служивший пристанищем для нелегального ЦОД, обеспечивавшего работу целого сегмента даркнета, перепрофилируют. По информации Datacenter Dynamics, печально известный объект CyberBunker при городке Трабен-Трарбах предполагается превратить в погреб.

В своё время бункер принадлежал НАТО и тоже использовался военными в качестве дата-центра. В 2013 году его приобрёл житель Нидерландов. Объект представляет собой многоуровневый комплекс с четырьмя подземными этажами общей площадью 5500 м². Также имеются два прилегающих офисных здания (4300 м²) и участок площадью 13 га. Заинтересованные стороны уже сделали коммерческие предложения, но окончательно решение о судьбе объекта пока не принято.

Источник изображения: Pawel Czerwinski/unsplash.com

В своё время мощности нелегального ЦОД обеспечивали проведение сделок в даркнете на многие миллионы долларов, но немецкие силовые ведомства прекратили его деятельность в 2019 году. В 2021 году сем человек были осуждены за участие в преступном сообществе, а сам объект перешёл в собственность земли Рейнланд-Пфальц в сентябре 2023 года.

Одним из потенциальных арендаторов из Нидерландов желает хранить в бункере сыр, другой же намерен применять его в роли винного погреба. Кроме того, предложено использовать бункер в качестве резервного хранилища данных для банка, а также клуба и отеля. Сама земля Рейнланд-Пфальц предлагает использовать помещения объекта для нужд госсектора. Впрочем, пока проводится оценка коммерческой ценности объекта, поскольку тот нуждается в серьёзном ремонте.

Заброшенные бункеры и шахты довольно часто используют для размещения ЦОД и других проектов, связанных с IT. Только в январе сообщалось о вероятном хранении мусорного тепла Эдинбургского университета в заброшенных шахтах, а в самом конце месяца появились данные об использовании воды из шахт для охлаждения ЦОД Data Center Ridge в США.

Израильская компания MedOne, по сообщению ресурса Datacenter Dynamics, построит на территории страны два новых ЦОД, которые расположатся за пределами Тель-Авива. Речь идёт о подземных объектах: инвестиции в проект оцениваются приблизительно в $270 млн.

MedOne, основанная в 1997 году, предлагает колокейшн-сервисы, облачные услуги и пр. В 2022-м 49 % в структуре MedOne было продано американской частной инвестиционной компании Berkshire Partners. Инвестором также является van Rooyen Group — инвестиционная группа, возглавляемая бывшим генеральным директором Cologix и нынешним главой Tract Грантом ван Ройеном (Grant van Rooyen).

Источник изображения: MedOne

В рамках нового проекта, как сообщается, MedOne строит кампус ЦОД в Кфар-Йоне — посёлке городского типа в 11 км к востоку от Нетании. Планируется создать два дата-центра на трёх подземных этажах площадью около 30 тыс. м². Первая площадка откроется в 2026 году, а вторая должна быть введена в эксплуатацию в 2027-м.

У MedOne уже есть четыре подземных объекта в Тель-Авиве, Петах-Тикве и Тират-ха-Кармеле общей площадью примерно 25 тыс. м². На сайте компании говорится, что она строит семь дополнительных ЦОД по всему Израилю общей площадью более 85 тыс. м² и мощностью 90 МВт.

Подземные дата-центры широко распространены в Израиле: такое размещение обеспечивает безопасность и непрерывность работы. Так, недавно Oracle сообщила о планах по строительству в стране второго защищённого ЦОД глубоко под землёй. Кроме того, регионы в Израиле есть у ведущих облачных провайдеров. Google объявила об открытии такого объекта в Тель-Авиве в конце 2022 года. А в 2023-м свои площадки запустили Amazon Web Services (AWS) и Microsoft Azure.

Княжестве Монако бескрайними просторами похвастаться не может, поэтому для экономии земли приходиться идти на хитрости. Так, компания Monaco Telecom намерена создать крупный дата-центр в подвале жилого дома. По данным Datacenter Dynamics, муниципальный совет уже одобрил проект.

Местные СМИ сообщают, что проект архитектурной компании Atelier Boisson + Boisson Architectes (ABBA) предусматривает строительство 10-этажного здания на участке площадью 1100 м². Комплекс Larvotto Supérieur общей стоимостью €45 млн ($48,4 млн) будет включать 35 квартир (в собственности государства), а ЦОД общей площадью 1550 м² займёт два из четырёх подземных уровней здания. На крыше дома установят солнечные панели, а сам объект подключат к энергосети SeaWergie Thalasso-Thermal Network (STTN), в рамках которой для обогрева и охлаждения используется морская вода.

Источник изображения: Julien Lanoy/unsplash.com

Строительство объекта должно стартовать уже в марте, а завершат возведение комплекса в 2027 году. Телекоммуникационный оператор Monaco Telecom принадлежит владельцу Iliad Ксавье Нилю (Xavier Niel) совместно с Княжеством Монако. По некоторым данным на сегодня компания является оператором трёх дата-центров в стране.

В рамках проекта Data Center Ridge в Западной Вирджинии (США) будет изучена эффективность применения шахтных вод с заброшенных рудников для охлаждения местных ЦОД, передаёт Datacenter Dynamics. В частности, планируется задействовать 37,8 млн м³ воды с бывшей шахты Bullitt близ городка Аппалачия (Appalachia) в округе Уайз (Wise). Проект ожидает грант в размере $3 млн в рамках федеральной программы Abandoned Mine Land Economic Revitalization (AMLER), ещё $1,5 млн намерено выделить Министерство энергетики США.

Проект включен в план по перестройке и обустройству территории угольной шахты (26,3 тыс. га), закрытой ещё в 1990-х годах. Финансирование будет поступать из разных источников, включая некоммерческую организацию объединение Energy Delta Lab, поддерживаемую местными властями, бизнесом и коммунальными службами. Data Center Ridge займёт площадь более 160 га и получит до 1 ГВт «чистой» энергии. Он позиционируется как самый экоустойчивый и энергоэффективный кампус ЦОД в мире.

Источник изображения: Energy Delta Lab

Energy Delta Lab разработала HVAC-систему с закрытым контуром, которая использует подземные воды с температурой ниже 12 °C. Она же работает над типовым проектом дата-центра мощностью 36 МВт и площадью 23 тыс. м², включающего офисные помещения, телеком-инфраструктуру, электро- и техническое оснащение, а также системы безопасности. Для обслуживания такого объекта потребуется порядка 40 человек. Предполагается, что такие типовые дата-центры заинтересуют гиперскейлеров.

Кампус является часть гораздо более крупной инициативы Virginia Energy Plan объёмом до $8,25 млрд. Energy Delta Lab как раз и была сформирована в рамках этой инициативы. Организация будет реализовать различные инициативы в области энергетики, в том числе связанные с природным газом и водородом, АЭС, ветряной и солнечной энергией, а также аккумуляторными хранилищами. Территория шахты, например, была выбрана в качестве потенциальной площадки для ЦОД с питанием от малых модульных реакторов (SMR). Ожидается, что подобные проекты помогут привлечь в регион новые ЦОД.

Генеральный директор корпорации Oracle Сафра Кац (Safra Catz), по сообщению ресурса Datacenter Dynamics, рассказала о планах по строительству в Израиле своего второго облачного дата-центра. Речь идёт о создании защищённой площадки, которая расположится глубоко под землёй.

Первый облачный ЦОД компании расположен в бункере площадью 14 тыс. м². Объект, построенный компанией Bynet Data Communications, занимает четыре этажа и находится на глубине 50 м — под 17-этажным зданием и пятью уровнями парковки в иерусалимском технологическом центре Хар-Хотзвим в Иерусалиме.

Новый израильский дата-центр Oracle будет размещён под землёй на глубине, эквивалентной 9-этажному зданию. Это позволит защитить его от возможных угроз. Подробности о проекте нового ЦОД не раскрываются. Отмечается лишь, что его открытие планируется «в скором времени». Кроме того, Кац сообщила, что Oracle удвоит свои инвестиции в Израиле.

Источник изображения: Oracle

Подземные дата-центры довольно распространены в Израиле. Такое размещение является необходимостью, призванной обеспечить безопасность и непрерывность обслуживания клиентов в условиях продолжающейся политической напряжённости в регионе. Облачные регионы в Израиле есть и у других ведущих провайдеров. Так, Google объявила о запуске такого региона в Тель-Авиве в конце 2022 года. В прошлом году свои площадки запустили Amazon Web Services (AWS) и Microsoft Azure.

Международная группа учёных намеревается выяснить, можно ли сохранить «мусорное» тепло суперкомпьютера Эдинбургского университета в старых шахтах для того, чтобы впоследствии направить его на отопление местных домов. По словам учёных, в шахтах много воды, поэтому они способны стать идеальным хранилищем тепла. При этом для более чем 800 тыс. шотландских домохозяйств отопление является дорогим удовольствием, так что дешёвый источник тепла им не помешает.

Исследование обойдётся в £2,6 млн ($3,3 млн), сообщает Datacenter Dynamics. Эдинбургский университет выделит £500 тыс. ($633 тыс). из собственно фонда, связанного со снижением вредных выбросов, а правительство Шотландии предоставило грант на сумму £1 млн ($1,27 млн). Подключатся и другие структуры, включая даже Министерство энергетики США с грантом $1 млн.

Источник изображения: hangela/pixabay.com

Дата-центр Advanced Computing Facility (ACF) на территории Эдинбургского университета уже обслуживает один суперкомпьютер, а в 2025 году к нему присоединится машина экзафлопсного уровня, первый суперкомпьютер такого класса в Великобритании. В рамках исследования Edinburgh Geobattery, проводимого специалистами в области геотермальной энергетики TownRock Energy совместно с представителями науки и промышленности, будет оцениваться, возможно и целесообразно ли хранить тёплую воду (+40 °C) в заброшенных шахтах до того, как передать её на нужды городского отопления.

Предполагается, что тепло ACF поможет обогреть не менее 5 тыс. домохозяйств, если тесты подтвердят теоретические выкладки. ACF выделяет до 70 ГВт·ч тепла ежегодно, но после запуска нового суперкомпьютера этот показатель увеличится до 272 ГВт·ч. Новая машина, оснащённая СЖО, будет построена в специально возведённом крыле ACF, которое само по себе обойдётся в £31 млн ($39,24 млн).

Фото: EPCC ACF / Keith Hunter

Использование тепла ЦОД обычно считается довольно эффективным методом дополнительной эксплуатации дата-центров. Тем не менее, такая технология имеет серьёзный недостаток, поскольку передавать тепло туда, где оно востребовано, не всегда целесообразно. Некоторые европейские системы располагаются в «шаговой» доступности от систем районного отопления, а другие представляют собой небольшие вычислительные модули, которые предлагается размещать непосредственно в зданиях. Есть и проекты централизованного управления передачей тепла ЦОД.

В непосредственной близости от Эдинбурга находятся заброшенные угольные, сланцевые и другие шахты, частично затопленные подземными водами. Проект предусматривает передачу тепла ЦОД естественными потоками грунтовых вод, с последующим использованием теплонасосов для обогрева зданий. Более того, в университете утверждают, что четверть британских домов расположена над бывшими шахтами, поэтому гипотетически получить тепло таким способом могут до 7 млн домохозяйств.