Медиакомпания X/Twitter получила налоговую льготу на сумму $10,1 млн за то, что согласилась разместить оборудование ЦОД в Атланте (Джорджия). Datacenter Dynamics сообщает, что бизнес Илона Маска (Elon Musk) пригрозил в противном случае отправить оборудование для ИИ-вычислений в Портленд (Орегон).

На прошлой неделе Управление по развитию округа Фултон (Development Authority of Fulton County) провело голосование, в результате которого подавляющим большинством голосов (шесть против двух) решено предоставить налоговые льготы сроком на 10 лет для проекта стоимостью $700 млн в Атланте. Предполагается дооснащение уже существующего объекта.

Фото: Kelly Sikkema / Unsplash

Инфраструктуру будут использовать для создания ИИ-продуктов X Platform. Например, больших языковых моделей (LLM) и инструментов семантического поиска. X заказала 10 тыс. ускорителей для этого проекта в апреле 2023 года, но в декабре местные власти отказали ей в налоговых льготах. X заявила о необходимости подобной «скидки», чтобы якобы не пришлось делать трудный выбор и размещать оборудование в Портленде (Орегон).

Несмотря на явный шантаж, в декабре X признала, что начнёт обновлять инфраструктуру независимо от того, предоставят ли местные власти льготу или нет. В январе представитель X признался, что большая часть ИИ-оборудования уже доставлена в ЦОД в Атланте, не считая одной партии стоимостью $200 млн. Тем не менее, он предупредил, что оставшееся «железо» могут направить в Портленд, если власти не пойдут навстречу.

X ссылается на то, что без льгот обслуживание инфраструктуры в Атланте будет на 21 % дороже, чем в Орегоне, а при их наличии стоимость в обоих штатах будет одинаковой. При этом проект не предусматривает создания новых рабочих мест, хотя и позволит сохранить 24 из уже существующих. Налоговые поступления в следующие 10 лет должны составить более $16 млн.

Фото: Taylor Vick / Unsplash

Пикантность ситуации в том, что у X практически не осталось собственных площадок. ЦОД в Атланте порядка десяти лет является одним из основных для компании. После прихода Маска компания покинула сначала один дата-центр в Сакраменто (Калифорния), а затем и второй, причём один из них в итоге достался Tesla. Суммарно компания высвободила 48 МВт, перенеся часть нагрузок в оставшиеся ЦОД. Ожидалось, что она сократит присутствие и в Атланте.

Компанию также обвиняли в иной форме «оптимизации» — неуплате счетов облачным провайдерам, включая Google, Oracle и Amazon. Маск требовал пересмотреть условия контрактов, но в результате X/Twitter столкнулась с техническими проблемами, вызвавшими сбои в работе сервисов. При этом компания по-прежнему во многом полагается на облака.

Uptime Institute считает, что операторов ЦОД ожидают испытания — многим придётся пересмотреть свои обещания о сроках достижения нулевых выбросов. Как сообщает Computer Weekly со ссылкой на экспертов организации, бизнес столкнётся с усиливающимся давлением со стороны регуляторов, что повлияет на его планы.

Это лишь один из прогнозов. В частности, в Uptime Institute считают, что «сложный период» для операторов ЦОД продлится до 2030 года — организации будут бороться за то, чтобы добиться поставленных целей, а также противостоять регуляторам и даже некоторым партнёрам, пытаясь привести корпоративные бизнес-задачи в соответствие с целями достижения экоустойчивости и устойчивого развития.

Регуляторы ужесточают контроль за сектором и уже начали прибегать к принудительным мерам достижения собственных целей. Например, инициативы вроде закона ЕС Corporate Sustainability Reporting Directive призваны усилить давление на крупные компании по всему миру. В частности, необходимо будет в обязательном порядке сообщать об углеродных выбросах и связанных с изменением климата рисках. Кроме того, имеется перспектива вступления в ЕС в силу Директивы по энергоэффективности (EED), которая потребует от операторов детально отчитываться об энергорасходах IT-оборудования.

Источник изображения: Johannes Plenio/unsplash.com

Другими словами, некогда поспешно взявшие на себя природоохранные обязательства организации столкнутся с тем, что не смогут их выполнить. Например, как сообщает Uptime Institute, в рамках инициативы ООН Science Based Targets initiative (SBTi) принято решение удалить Amazon Web Services (AWS) из списка компаний, готовых бороться с климатическими изменениями. В 2019 году Amazon обязалась к 2040 году устранить или компенсировать все свои углеродные выбросы, но к августу 2023 года стало понятно, что AWS не удаётся добиться поставленных целей.

Теперь, по мнению Uptime Institute, операторам будет труднее и дороже выполнять публично взятые на себя обязательства, а некоторые могут и вовсе отказаться от них. Другой вариант — максимально снизить прозрачность отчётов о достижении целей, особенно с учётом роста использования энергоёмкого оборудования и ПО, а также недостатка возобновляемой энергии и растущих требований к экоустойчивости со стороны государственных и надгосударственных органов.

Например, британская инициатива по достижению нулевых выбросов предполагает, в частности, создания сетей отопления, которые могли бы использовать избыточное тепло ЦОД для обогрева домов и офисов. Но в результате многие операторы могут стать менее открытыми при публикации отчётов, в которых они раскрывают ключевые показатели экоустойчивости, обнародуя лишь необходимую по закону информацию.

Источник изображения: Elisa Ventur/unsplash.com

По мнению экспертов, индустрия находится в «поворотной точке» — под давлением бизнес может начать широкомасштабное внедрение более «агрессивных и продуманных» стратегий достижения экоустойчивости. В частности, из-за роста спроса на вычислительные мощности операторам придётся прилагать больше усилий для того, чтобы снизить общее энергопотребление.

В Uptime Institute уверены, что выбросы ЦОД и потребление электроэнергии заметно вырастут. По некоторым оценкам, расход электричества в обозримом будущем может как минимум удвоиться. Из-за этого увеличится и нагрузка на энергосети и цепочки поставок, углеродной нейтральности добиться будет ещё сложнее, заодно вырастут затраты на строительство и обслуживание ЦОД — операторы попадут под «перекрёстный огонь» регуляторов, групп мониторинга и всевозможных экоактивистов.

Китайский техногигант Tencent разместил солнечную электростанция в своём кампусе Tianjin High-Tech Cloud Data Center. Как сообщает Datacenter Dynamics, суммарная мощность установленных на крыше панелей составляет 10,54 МВт, они могут генерировать до 12 млн кВт∙ч ежегодно. В Tencent уже заявили, что такого количества энергии достаточно для снабжения до 6 тыс. домохозяйств.

Комапания пообещала стать углеродно-нейтральной к 2030 году. Сейчас на возобновляемую энергию приходится 54 % всего потребляемого ежегодно дата-центрами электричества, а более 70 % её кампусов ЦОД получают энергию из «зелёных» источников. У самой компании есть уже более 50 МВт собственных «зелёных» мощностей.

Источник изображения: Tencent

Энергия от новой станции проходит фильтрацию и преобразование для того, чтобы её было легче использовать, поскольку станция включена в основную энергосеть региона. Для хранения избыточной энергии установлено хранилище неназванного типа, а специальная ИИ-система управляет электропитанием ЦОД. В Tencent подчёркивают, что возобновляемые источники из-за нерегулярности поступления энергии значительно усложняют управление энергообеспечением дата-центров. Приходится прогнозировать расход электричества в зависимости от погоды и нагрузок, а также разрабатывать рекомендации по энергосбережению.

Облачная платформа Amazon Web Services (AWS), по сообщению ресурса Datacenter Dynamics, займётся реализацией крупного проекта по строительству сети дата-центров в округе Мадисон (Миссисипи, США). Инициатива получила название «Проект Атлас» (Project Atlas). Суммарные затраты оцениваются в $10 млрд.

«Проект Атлас» уже одобрен на законодательном уровне, причём власти утвердили ряд стимулирующих мер. Это, в частности, 100 % освобождение от корпоративного подоходного налога на 10 лет, а также налоговые льготы на продажи и любые инвестиции, сделанные в течение 12 месяцев после завершения проекта. Amazon также получит возврат в размере 3,15 % от затрат на строительство и полное освобождение от налога на продажи и использование оборудования.

Более того, компания получит 30-летнее освобождение от налогов при условии, что будет ежегодно инвестировать в регионе как минимум $500 млн и открывать по 50 дополнительных рабочих мест. В результате Amazon начнёт платить подоходный налог через 10 лет, а все налоговые льготы прекратят своё действие только в 2057 году.

Изображение: AWS

Согласно обнародованным данным, инвестиции Amazon предусматривают создание ряда кампусов ЦОД в двух промышленных зонах округа Мэдисон, что позволит сформировать не менее 1 тыс. рабочих мест. Эти дата-центры займут в общей сложности площадь около 688 га. Ожидается, что в проект будут вовлечены 6–7 тыс. строителей. Завершить работы планируется к 2027 году.

Питанием новые объекты обеспечит энергетическая компания Entergy Mississippi. Для этого будут развёрнуты дополнительные солнечные фермы в Хиндсе, Вашингтоне и Таллахатчи. Ожидается, что Entergy Mississippi вложит в эти площадки от $2 до $3 млрд. Amazon утверждает, что с 2010 года она инвестировала $2,3 млрд в проекты, включающие пять солнечных ферм и ветряную электростанцию в Миссисипи.

Изображение: AWS

Кроме того, Amazon пообещала создать различные обучающие программы, в том числе бесплатные, в области сетевых инфраструктур, дата-центров и облаков для старшеклассников, студентов и преподавателей местных образовательных организаций.

Корпорация Meta✴, по сообщению Bloomberg, построит в Индиане (США) один из своих первых дата-центров, специально спроектированных для генеративного ИИ. Ожидается, что затраты на реализацию этого масштабного проекта составят приблизительно $800 млн. Об инициативе объявили губернатор штата Индиана и руководители Meta✴.

ЦОД расположится в центре River Ridge в Джефферсонвилле, заняв площадь около 65 тыс. м². Планируется, что объект будет получать питание исключительно от возобновляемых источников энергии. Дата-центр будет оснащён стойками высокой плотности. Говорится о применении собственных чипов и сторонних ускорителей. Серверы и сетевые компоненты будут использовать одну и ту же физическую инфраструктуру. Жидкостное охлаждение планируется реализовать по схеме Direct-to-chip.

Источник изображения: pixabay.com

В процесс строительства ЦОД будут вовлечены около 1250 инженеров и рабочих. Запустить объект в эксплуатацию компания Meta✴ намерена к 2026 году. Он же даст работу примерно сотне высокооплачиваемых специалистов. По условиям соглашения с властями штата, Meta✴ получит 35-летнее освобождение от налога с продаж в Индиане. Причём этот срок может быть увеличен, если компания решит и дальше развивать свои кампусы ЦОД в регионе.

Австралийская Goodman Group, как сообщает Datacenter Knowledge, твёрдо намерена добиться успеха на стремительно растущем рынке ЦОД Азиатско-Тихоокеанского региона. Компания намерена построить 1 ГВт мощностей в Японии, уже начала строительство нового 50-МВт в Гонконге и открыла офис в Сингапуре.

Goodman построит новый кампус на участке в 45 га в городе Цукуба — землю для этого она приобрела ещё в 2022 году. Расположенный в 50 км от столицы Токио кампус будет иметь ёмкость в 1 ГВт. Подготовка площадки и инфраструктурные работы уже начались, а первая очередь ЦОД должна быть закончена к 2026 году. Более того, первые 50 МВт уже забронированы. Новый кампус дополнит уже имеющееся ЦОД Goodman в других японских городах общей ёмкостью 300 МВт.

Источник изображения: Goodman

В Гонконге к 2026 году компания превратит бывший склад Goodman Texaco Centre в 50-МВт ЦОД. После завершения работ её портфолио в Гонконге вырастет до 392 МВт. По данным Goodman, в Гонконге наблюдается стабильный рост спроса на новые мощности, только за последние полгода гиперскейлеры заключили соответствующие соглашения на $2 млрд. Наконец, новый офис в Сингапуре поможет компании в развитии местного бизнеса.

По словам Goodman, именно дата-центры помогут компании вырасти, а Азия в целом остаётся для неё ключевым рынком. Ёмкость же всего портфолию ЦОД Goodman составляет 3,7 ГВт. Сюда входят законченные и пока ещё планируемые объекты, а также заранее зарезервированные мощности.

Equinix анонсировала полностью управляемый частный облачный сервис Private AI, который упрощает компаниям работу суперкомпьютерной ИИ-инфраструктурой NVIDIA DGX AI, ускоряя таким образом создание и запуск пользовательских моделей генеративного искусственного интеллекта (ИИ). Equinix обеспечивает поддержку и безопасность корпоративного уровня, включая помощь специалистов ЦОД IBX и экспертов NVIDIA по ИИ.

Equinix Private AI охватывает системы NVIDIA DGX, сетевые решения NVIDIA и программную платформу NVIDIA AI Enterprise. Equinix развёртывает принадлежащую клиенту инфраструктуру в ЦОД IBX и управляет ей. Глава Equinix заявил, что для реализации потенциала генеративного ИИ, предприятиям необходима адаптируемая, масштабируемая гибридная инфраструктура на местных рынках. «Наш новый сервис предоставляет клиентам быстрый и экономичный способ внедрения передовой инфраструктуры ИИ, которая эксплуатируется и управляется экспертами по всему миру», — отметил он.

Источник изображений: Equinix

Сервис уже доступен для всех желающих. Среди компаний, получивших ранний доступ к нему, есть ведущие бренды в области биофармацевтики, финансовых услуг, ПО, автомобилестроения и ретейла, которые создают центры передового опыта в области ИИ. Они формируют основу для широкого спектра быстро развивающихся вариантов использования LLM, таких как ускорение вывода на рынок новых препаратов, разработка ИИ-ассистентов для агентов по обслуживанию клиентов и виртуальных помощников по повышению производительности.

Полностью управляемый сервис NVIDIA AI от Equinix позволяет клиентам управлять своей инфраструктурой ИИ в непосредственной близости от источников данных. Сервис предлагает высокоскоростной доступ к частным сетям, облакам и поставщиками корпоративных услуг, что ускоряет обработку ИИ-нагрузок с одновременным соблюдением требований к безопасности данных и соответствием правовым нормам.

Компания Danfoss заключила с Google соглашение о внедрении в ЦОД последней новых систем охлаждения. Как сообщает пресс-служба Danfoss, решения компании помогут утилизировать избыточное тепло дата-центров, а Google в рамках партнёрства обеспечит доступ к своим ИИ-сервисам. Это позволит оптимизировать взаимодействие Danfoss с с клиентами, внутренние рабочие процессы и поднять производительность в целом.

Danfoss разрабатывает системы охлаждения, отопления, преобразования энергии, управления двигателями и иное промышленное оборудование. В дата-центрах Google компания намерена внедрить малошумные безмасляные компрессоры Turbocor с магнитными подшипниками, применяемые в системах воздушного или водяного охлаждения. Дополнительно будут использоваться модули Danfoss для повторного использования тепла, которые обеспечат «зелёный» обогрев не только помещений самой Google, но и расположенных поблизости коммерческих и жилых строений.

Источник изображения: Danfoss

Применение ИИ-решений Google позволит Danfoss оптимизировать внутренние операции и пользовательский опыт. Например, ИИ можно применять для сбора информации, автоматизации базы знаний, а также создания описаний продуктов и использования чат-ботов в электронной коммерции.

Как заявляют в Google, речь идёт о сотрудничестве с лидером в создании энергоэффективных систем, именно такие решения помогут выполнить цель техногиганта по полному переводу ЦОД на «безуглеродную» энергию к 2030 году. В Danfoss также подчеркнули, что ИИ поможет произвести революцию в строительстве и декарбонизации ЦОД. Ранее Google и Danfoss совместно с Schneider Electric и Danish Data Center Industry учредители в Дании платформу Net Zero Innovation Hub, основной целью которой является ускорение «зелёной трансформации» дата-центров.

Объём энергии, потребляемой дата-центрами, в результате роста криптовалют и ИИ-систем может увеличится более чем вдвое за три года. С соответствующим прогнозом выступило Международное энергетическое агентство (IEA). Тем не менее, рост потребления компенсируется появлением новых источников энергии.

Как сообщает агентство, сегодня в мире насчитывается более 8 тыс. ЦОД, 33 % из которых находятся в США, 16 % в Европе и около 10 % в Китае. В 2022 году их суммарное потребление составило около 460 ТВт∙ч, а в 2026 году оно может превысить уже 1000 ТВт∙ч. В США за этот период потребление вырастет с 200 ТВт∙ч (4 % от общего энергопотребления страны) до почти 260 ТВт∙ч в 2026 году (6 %). Основными драйверами роста станут развитие сетей 5G, облачных сервисов и налоговые льготы для операторов ЦОД.

В Китае, по оценкам госорганов, потребление ЦОД должно удвоиться до 400 ТВт∙ч к 2030 году в сравнении с 2020 годом. IEA же прогнозирует, что уже к 2026 году потребление вырастет до 300 ТВт∙ч, а драйверами роста станут 5G и IoT. Наконец, в Евросоюзе потребление в 2022 году было немногим ниже 100 ТВт∙ч (около 4 %), там на тот момент было 1240 ЦОД. Большинство кампусов приходится на рынки FLAPD (Франкфурт, Лондон, Амстердам, Париж, Дублина), но планируется строительство и новых объектов. В 2026 году энергопотребление в секторе должно вырасти почти до 150 ТВт∙ч.

Источник изображения: IEA

Например, по оценкам IEA, уже к 2026 году в Ирландии, ставшей одним из важнейшим хабов для ЦОД, последние будут потреблять 32 % всей электроэнергии в стране — 82 дата-центра здесь уже функционируют, 14 строятся и возведение ещё 40 утверждается. В 2022 году речь шла лишь о 17 % энергопотребления страны. При этом энергетический кризис в стране так и не закончился.

Источник изображения: IEA

Быстрая интеграция ИИ во многих секторах экономики увеличивает общее потребление энергии ЦОД. Например, поисковики могут столкнуться с ростом потребления в 10 раз в случае тотального внедрения ИИ. С учётом кратной разницы в использовании электричества при запросах в обычном поисковике и обращений к LLM вроде ChatGPT, эксперты предполагают, что только поиск с помощью ИИ потребует 10 ТВт∙ч ежегодно. ИИ-индустрия в целом, как ожидается, в 2026 году будет потреблять минимум на порядок больше энергии, чем в 2023 году.

Что касается криптовалют, то в 2022 году на них пришлось около 110 ТВт∙ч (0,4 % от мирового энергопотребления). За базовый вариант берётся прогноз, при котором потребление в этом секторе к 2026 году вырастет более чем на 40 % до 160 ТВт∙ч. При этом скорость развития отрасли ещё предстоит уточнить.

Источник изображения: IEA

Всего к 2026 году потребление электричества вырастет лишь на 3,4 %. Впрочем, рост не должен вызвать острого дефицита — его компенсируют за счёт источников возобновляемой энергии вроде ветряных, солнечных и гидроэлектростанций. Кроме того, большая ставка делается на рост «мирного атома». Уже к 2026 году на источники энергии с низкими выбросами придётся почти половина мирового производства электричества, для сравнения — в 2023 году речь шла о менее 40 %. В целом рост энергопотребления будет меньше, чем рост генерации возобновляемой энергии.

Источник изображения: Bloomberg/IEA

По словам главы IEA Фатиха Бироля (Fatih Birol), сегодня энергетический сектор производит углекислого газа больше, чем любая другая сфера экономики, поэтому быстрый рост возобновляемой и атомной энергетики в ближайшие три года не может не обнадёживать. В то же время должна уменьшиться глобальная интенсивность выбросов, связанных с выработкой энергии. Ожидается, что она в среднем будет падать до 2026 года по 3,5 % ежегодно. Для Евросоюза этот показатель составит и вовсе 13 % в год.

Юлихский исследовательский центр (FZJ) в Германии раскрыл информацию о конфигурации дата-центра для первого европейского суперкомпьютера экзафлопсного класса — системы JUPITER (Joint Undertaking Pioneer for Innovative and Transformative Exascale Research).

Напомним, Европейское совместное предприятие по развитию высокопроизводительных вычислений (EuroHPC JU) заключило контракт на создание JUPITER с консорциумом, в который входят Eviden (подразделение Atos) и ParTec, немецкая компания по производству суперкомпьютерного оборудования. Ввод суперкомпьютера в эксплуатацию запланирован на осень 2024 года.

Сообщается, что JUPITER будет построен на базе модульного ЦОД, за создание которого отвечает Eviden. Этот дата-центр займёт площадь приблизительно 2300 м². Модульная архитектура на основе контейнеров обеспечит ряд преимуществ: значительное сокращение времени планирования и монтажа, а также снижение затрат на строительство и эксплуатацию. Кроме того, в дальнейшем облегчится модернизация, тогда как инфраструктура электропитания и охлаждения может гибко адаптироваться к новым требованиям. Eviden заявляет, что благодаря модульности сроки поставки необходимых узлов сократятся на 50 %.

Источник изображения: Eviden

Конфигурация ЦОД включает около 50 взаимозаменяемых модулей, в том числе 20 IT-контейнеров, 15 контейнеров энергоснабжения, а также примерно 10 логистических контейнеров со складскими помещениями, инженерными комнатами и пр. В состав IT-модулей войдут по два контейнера, объединяющих 20 стоек платформы BullSequana XH3000 с прямым жидкостным охлаждением. Модули данных будут содержать четыре контейнера с накопителями.

Модульный ЦОД финансируется Федеральным министерством образования и исследований (BMBF). При этом BMBF и Министерство культуры и науки земли Северный Рейн-Вестфалия (MKW NRW) обеспечат равное финансирование технического оборудования. В состав суперкомпьютера войдут модули NVIDIA Quad GH200, а также энергоэффективные высокопроизводительные Arm-процессоры SiPearl Rhea. Быстродействие на операциях обучения ИИ составит до 93 Эфлопс, а FP64-производительность «незначительно превысит 1 Эфлопс».