Специализирующаяся на строительстве и управлении ЦОД американская TECfusions заключила соглашение с TensorWave, предусматривающее предоставление последней ИИ-инфраструктуры. По информации Datacenter Dynamics, в рамках договора TensorWave будет арендовать у оператора 1 ГВт ёмкости ЦОД.

По словам представителя TECfusions, сотрудничество знаменует собой переломный момент в развитии ИИ-инфраструктуры. Как говорит компания, в ЦОД в Кларксвилле (Clarksville) уже размещён один из крупнейших в мире кластеров ускорителей, а сделка является свидетельством готовности TECfusions к самым ресурсоёмким проектам.

Развёртывание 1 ГВт будет происходить поэтапно, но доступ к значимой доле ёмкости должен появиться уже к началу 2025 года. Tecfusion намерена использовать локальные генерирующие мощности, функционирующие в основном на природном газе, для обеспечения стабильных поставок энергии и во избежание скачков цен на неё. Компания уже владеет микросетями на территории ЦОД в Нью-Кенсингтоне (200 МВт, Пенсильвания) и Кларксвилле (220 МВт, Вирджиния).

Источник изображения: Henry Deng/unsplash.com

Партнёрство сформировано по итогам SAFE-раунда финансирования TensorWaves, в ходе него привлечено $43 млн. Основанный в 2023 году стартап из Лас-Вегаса предоставляет клиентам доступ к вычислительным ИИ-мощностям на основе ускорителей AMD. На полученные средства TensorWave оснастит ЦОД ускорителями AMD Instinct MI300X, расширит команду и начнёт подготовку к внедрению следующего поколения ускорителей Instinct MI325X. На IV квартал намечен запуск новой инференс-платформы Manifest в IV.

Как заявляют в TensorWave, способность TECfusions выводить на рынок масштабные, готовые к ИИ-задачам ёмкости за считанные месяцы значительно ускорит освоение рынка компанией. Партнёрство имеет ключевое значение для сохранения конкурентоспособности в ИИ-секторе.

Сейчас TECfusions управляет тремя действующими ЦОД — в Аризоне, Пенсильвании и Вирджинии. В сентябре оператор объявил о завершении строительства третьего зала для ИИ-оборудования в Кларксвилле. Теперь общая ёмкость этого дата-центра достигла 34,5 МВт. До конца года будет оснащён четвёртый зал на 13,5 МВт.

Председатель правления и генеральный директор Meta✴ Марк Цукерберг (Mark Zuckerberg), по сообщению ресурса Tom's Hardware, раскрыл масштабы кластера, который используется для обучения ИИ-модели нового поколения Llama-4. По его словам, для этих целей задействованы более 100 тыс. ускорителей NVIDIA H100.

Напомним, в начале сентября нынешнего года стартап xAI, курируемый Илоном Маском (Elon Musk), объявил о запуске ИИ-суперкомпьютера Colossus, в основу которого положены 100 тыс. штук H100. В дальнейшем количество ускорителей в составе Colossus планируется увеличить вдвое. Теперь об эксплуатации кластера схожего масштаба рассказал Цукерберг.

Глава Meta✴ не стал вдаваться в подробности о характеристиках Llama-4, ограничившись лишь фразами вроде «новые модальности», «более сильные рассуждения» и «повышенное быстродействие». Ранее Meta✴ заявляла о намерении потратить в 2024-м от $30 млрд до $37 млрд на развитие своей инфраструктуры — прежде всего для задач ИИ. Кроме того, говорилось, что к концу текущего года компания рассчитывает оперировать мощностями, эквивалентными более чем 500 тыс. ускорителей NVIDIA H100.

Источник изображения: Meta✴

Вместе с тем, как отмечается, возникают сложности при обеспечении питанием столь масштабных ИИ-кластеров. Дело в том, что один современный GPU может потреблять до 3,7 МВт·ч электроэнергии в год. Это означает, что массив из 100 тыс. таких ускорителей потребует не менее 370 ГВт·ч в год, чего достаточно для обеспечения энергией более 34 млн среднестатистических американских домохозяйств. Цукерберг признаёт, что трудности, связанные с доступностью энергоресурсов, в перспективе могут ограничить темпы роста отрасли ИИ.

Как добавляет ComputerWeekly, Meta✴ также отказалась от практики увеличения срока службы серверов с целью сокращения расходов. Ранее компания сообщила о продлении периода эксплуатации оборудования до пяти лет вместо прежних четырёх с половиной: это, как ожидалось, даст экономию в $1,5 млрд. Однако теперь финансовый директор Meta✴ Сьюзан Ли (Susan Li) заявила, что компания в свете стремительного развития ИИ намерена применять серверы последнего поколения, чтобы максимально эффективно использовать доступную ёмкость существующих дата-центров.

Компания Meta✴ Platforms объявила результаты III квартала 2024 года, завершившегося 30 сентября. Выручка и прибыль компании, чья структура включает соцсети Facebook✴ и Instagram✴, превысили ожидания аналитиков Уолл-стрит. Тем не менее, акции компании упали после публикации результатов на 3 %, что объясняется более низким, чем ожидалось, количеством пользователей и планами по увеличению расходов на инфраструктуру в 2025 финансовом году.

Выручка Meta✴ выросла на 19 % до $40,59 млрд, что выше консенсус-оценки аналитиков, опрошенных LSEG, в размере $40,29 млрд. Чистая прибыль компании составила $15,7 млрд или $6,03 на акцию, что на 35 % больше год к году, а также выше консенсус-прогноза аналитиков, ожидавших $5,25 прибыли на акцию. Несмотря на впечатляющее увеличение прибыли за квартал, это самый низкий показатель роста со II квартала 2023 финансового года.

Источник изображения: NVIDIA

Meta✴ повысила прогноз капитальных затрат на 2024 финансовый год до $38–$40 млрд с предыдущего прогноза в размере с $37–$40 млрд. Также компания заявила, что ожидает значительного роста капитальных затрат в 2025 году из-за ускорения расходов на инфраструктуру. «Наши инвестиции в ИИ по-прежнему требуют серьезной инфраструктуры, и я ожидаю, что продолжу вкладывать в неё значительные средства», — сообщил гендиректор Meta✴ Марк Цукерберг (Mark Zuckerberg) в ходе телефонной конференции с аналитиками.

Цукерберг сообщил об огромных инвестициях компании в ИИ, которые включают строительство ЦОД и приобретение ускорителей NVIDIA для реализации стратегии в области ИИ и улучшения основного бизнеса компании в сфере онлайн-рекламы. По словам Цукерберга, более миллиона рекламодателей использовали рекламные инструменты на базе генеративного ИИ.

Meta✴ также обновила прогноз общих расходов на 2024 финансовый год, которые будут находиться в диапазоне от $96 до $98 млрд, что ниже предыдущего прогноза в $96–$99 млрд. Что касается текущего квартала, то Meta✴ ожидает получить выручку в диапазоне от $45 млрд до $48 млрд со средней точкой выше консенсус-прогноза аналитиков в $46,3 млрд.

Согласно отчету DIGITIMES Research, в 2024 году глобальные поставки ИИ ASIC собственной разработки для ЦОД, как ожидается, достигнут 3,45 млн единиц, а доля рынка Google вырастет до 74 %. Как сообщают аналитики Research, до конца года Google начнёт массовое производство нового поколения ИИ-ускорителей TPU v6 (Trillium), что ещё больше увеличит её присутствие на рынке.

В 2023 году доля Google на рынке ИИ ASIC собственной разработки для ЦОД оценивалась в 71 %. В отчёте отмечено, что помимо самой высокой доли рынка, Google также является первым из трёх крупнейших сервис-провайдеров в мире, кто разработал собственные ИИ-ускорители. Первый TPU компания представила в 2016 году. Ожидается, что TPU v6 будет изготавливаться с применением 5-нм процесса TSMC, в основном с использованием 8-слойных чипов памяти HBM3 от Samsung.

Также в отчёте сообщается, что Google интегрировала собственную архитектуру оптического интерконнекта в кластеры TPU v6, позиционируя себя в качестве лидера среди конкурирующих провайдеров облачных сервисов с точки зрения внедрения технологий и масштаба развёртывания. Google заменила традиционные spine-коммутаторы на полностью оптические коммутаторы Jupiter собственной разработки, которые позволяют значительно снизить энергопотребление и стоимость обслуживания ИИ-кластеров TPU POD по сравнению с решениями Broadcom или Mellanox.

Источник изображения: cloud.google.com

Кроме того, трансиверы Google получил ряд усовершенствований, значительно нарастив пропускную способность. Если в 2017 году речь шла о полнодуплексном 200G-решении, то в этом году речь идёт уже о 800G-решениях с возможностью модернизации до 1,6T. Скорость одного канала также существенно выросла — с 50G PAM4 в 2017 году до 200G PAM4 в 2024 году.

Акции Supermicro (Super Micro Computer Inc.) упали в цене на 31 % после того, как нанятый аудитор Ernst & Young LLP отказался от дальнейшей проверки деятельности компании, передаёт SiliconAngle. Ernst & Young после изучения документов и отчётов отказалась ставить под ними свою подпись и прекратила дальнейшие попытки аудита.

Сегодня Supermicro является одним из ведущих поставщиков оборудования для дата-центров, она входит в тройку крупнейших покупателей чипов NVIDIA. Ernst & Young наняли для аудита данных о доходах за минувший фискальный год, закончившийся 30 июня. Через четыре месяца после того, как компания взялась за дело, она выразила обеспокоенность тем, как в Supermicro составляется финансовая отчётность.

В ответ на высказанные аудиторами сомнения, в совете директоров Supermicro сформировали комитет для проверки финансов, который нанял юридическую компанию и фирму, осуществляющую судебную финансовую экспертизу. Изучение предварительных отчётов нанятых компаний и привело к тому, что Ernst & Young приняла окончательное решение отказаться от сотрудничества с Supermicro. Аудиторы заявили, что больше не могут полагаться на заявления руководства заказчика и комитета и не хотят ассоциироваться с отчётностью, подготовленной руководством Supermicro.

Источник изображения: Jakub Żerdzicki/unsplash.com

В августе последняя отложила подачу ежегодного доклада о финансовых показателях после того как Hindenburg Research опубликовала разгромный доклад о деятельности компании, также серьёзно отразившийся на цене её акций. В числе прочего упоминалось несоблюдение мер экспортного контроля, а также соглашения с дочерними компаниями на нерыночных условиях. После публикации доклада Министерство юстиции начало своё расследование деятельности Supermicro. В частности, стало известно, что власти запрашивали информацию о возможных манипуляциях с бухгалтерской отчётностью.

Ранее финансовые операции Supermicro уже попали в поле зрения властей в 2020 году, когда компания заплатила $17,5 млн за прекращение Комиссии по ценным бумагам и биржам США (SEC) расследования её бухгалтерской отчётности. В сентябре 2024 года юридическая компания Robbins Geller Rudman & Dowd LLP раскрыла информацию о том, что в коллективном иске «Averza против Super Micro Computer» производитель серверного оборудования, а также некоторые его руководители обвиняются в нарушении Закона о ценных бумагах 1934 года.

В последнем заявлении для SEC компания сообщила, что ищет нового аудитора на замену Ernst & Young и не ожидает, что разрешение любого из вопросов, поднятых аудиторами или рассматриваемых специальным комитетом, приведет к каким-либо изменениям ее квартальных отчетов за 2024 финансовый год, равно как и за предыдущие финансовые годы. Если компания не предоставит отчёт к 16 ноября, ей грозит делистинг с NASDAQ.

Компания KKR подписала соглашение о стратегическом партнёрстве с американской инвестиционной компанией Energy Capital Partners (ECP) на $50 млрд. По данным пресс-службы KKR, сотрудничество будет связано с ускоренным развитием ЦОД, генерацией энергии, а также строительством инфраструктуры для облачных и ИИ-сервисов по всему миру. Как заявляют в KKR, объединив свои ресурсы и возможности, компании получат портфель проектов ЦОД более чем на 8 ГВт, а также 100 ГВт уже действующих и готовых к строительству источников энергии, что позволит быстро реализовать все планы.

Сотрудничество направлено на поддержку крупномасштабных проектов по обучению ИИ-моделей, их тюнингу и инференсу в разных регионах. Партнёры будут работать с участниками отрасли, включая коммунальные службы, производителей энергии, а также девелоперов для того, чтобы ускорить создание крупных кампусов для гиперскейлеров. KKR внесёт вклад в совместные проекты существующей инфраструктурой, стратегическими проектами в сфере недвижимости и страховыми счетами. ECP предложит свои нынешние и будущие пулы капитала для инфраструктурных инициатив.

Источник изображения: Sebastian Herrmann/unsplash.com

Как считают в ECP, чтобы сохранить лидерство США в сфере ИИ, понадобятся крупные инвестиции в энергетическую инфраструктуру, которые помогут решить вопросы, связанные с ценами на электричество и углеродными выбросами. ECP уже сегодня инвестирует в возобновляемую энергетику, в частности, в системы хранения энергии, экоинфраструктуру, повышение эффективности и надёжности объектов и др. Компания владеет более 83 ГВт генерирующих мощностей на рынке США.

KKR владеет и управляет значительным числом ЦОД — более 100 объектов по всему миру. Компания называет себя одним из ключевых инвесторов на рынке дата-центров. В 2021 году компания закрыла одну из крупнейших сделок по покупке ЦОД, купив вместе с Global Infrastructure Partners (теперь BlackRock) компанию CyrusOne за $15 млрд.

Недавно в союзе с Singtel компания объявила о намерении инвестировать S$1,75 млрд ($1,3 млрд) в оператора ST Telemedia Global Data Centres, с возможностью вложить дополнительные S$1,24 млрд ($920 млн). Есть собственные инфраструктурные проекты и у других компаний. Например, BlackRock запустила собственный фонд инвестиций в ИИ-инфраструктуру для дата-центров и энергетических проектов — инициатива поддерживается Microsoft и NVIDIA.

Компания Cisco анонсировала сервер высокой плотности UCS C885A M8, предназначенный для решения задач в области ИИ, таких как обучение больших языковых моделей (LLM), тонкая настройка моделей, инференс, RAG и пр.

Источник изображения: Cisco

Устройство выполнено в форм-факторе 8U. В зависимости от модификации устанавливаются два процессора AMD EPYC 9554 поколения Genoa (64 ядра; 128 потоков; 3,1–3,75 ГГц; 360 Вт) или два чипа EPYC 9575F семейства Turin (64 ядра; 128 потоков; 3,3–5,0 ГГц; 400 Вт). Доступны 24 слота для модулей DDR5-600 суммарным объёмом 2,3 Тбайт.

В максимальной конфигурации могут быть задействованы восемь SXM-ускорителей NVIDIA H100, H200 или AMD Instinct MI300X. Каждый ускоритель дополнен сетевым адаптером NVIDIA ConnectX-7 или NVIDIA BlueField-3 SuperNIC. Кроме того, в состав сервера входит DPU BlueField-3. Слоты расширения выполнены по схеме 5 × PCIe 5.0 x16 FHHL плюс 8 × PCIe 5.0 x16 HHHL и 1 × OCP 3.0 PCIe 5.0 x8 (для карты X710-T2L 2x10G RJ45 NIC).

Источник изображения: Cisco

Новинка оборудована загрузочным SSD вместимостью 1 Тбайт (M.2 NVMe), а также 16 накопителями U.2 NVMe SSD на 1,92 Тбайт каждый. Установлены два блока питания мощностью 2700 Вт и шесть блоков на 3000 Вт с возможностью горячей замены.

Cisco также представила инфраструктурные стеки AI POD, адаптированные для конкретных вариантов использования ИИ в различных отраслях. Они объединяют вычислительные узлы, сетевые компоненты, средства хранения и управления. Стеки, как утверждается, обеспечивают хорошую масштабируемость и высокую эффективность при решении ИИ-задач.

Холдинг Alphabet, материнская структура Google, сообщил неаудированные финансовые результаты III квартала 2024 года, завершившегося 30 сентября. Alphabet заявил, что его инвестиции в ИИ окупаются, поскольку выручка облачного подразделения выросла на 35 %. Также значительно увеличилась выручка самого холдинга, значительно превысив прогнозы Уолл-стрит, благодаря чему его акции выросли в цене почти на 6 % на внебиржевых торгах во вторник.

Перед пресс-конференцией в среду гендиректор Alphabet Сундар Пичаи (Sundar Pichai) отметил, что «долгосрочная ориентация и инвестиции компании в ИИ» начинают приносить плоды как корпоративным клиентам, так и обычным потребителям.

Выручка Alphabet составила за квартал $88,27 млрд, превысив показатель аналогичного квартала в 2023 году на 15 %, а также консенсус-прогноз аналитиков, опрошенных LSEG, в размере $86,30 млрд. При этом доход Google Cloud вырос год к году на 35 % до $11,35 млрд, а операционная прибыль платформы увеличилась в семь раз до $1,9 млрд с $266 млн в прошлом году.

Источник изображения: Google

Как отметила финансовый директор Alphabet Анат Ашкенази (Anat Ashkenazi), присоединившаяся к холдингу в июне после 23 лет работы в фармацевтической компании Eli Lilly, набор облачных услуг Google Workspace показал сильный рост в III квартале. При этом набор облачных инструментов для управления данными и ИИ опередил по темпам роста показатель облачного подразделения в целом.

Ашкенази также сообщила, что капитальные затраты Alphabet в 2025 году будут выше, чем в этом году. В III квартале капзатраты Alphabet выросли на 62 % до $13 млрд. Большая часть этих расходов пошла на «техническую инфраструктуру, из которых около 60 % пришлось на серверы, а 40 % — на ЦОД и сетевое оборудование.

Источник изображения: Google

По словам финдиректора, Google взяла на себя обязательство вложить в текущем квартале более $7 млрд в запланированные инвестиции в ЦОД, из которых $6 млрд будут инвестированы в объекты на территории США. Компания планирует оптимизировать «физическое присутствие и повысить эффективность технической инфраструктуры», а также «оптимизировать операции всей компании с помощью ИИ», сказала Ашкенази. Ожидается, что в IV квартале капзатраты будут такими же, как в III квартале.

Чистая прибыль Alphabet выросла до $26,3 млрд или $2,12 на акцию, по сравнению с $19,7 млрд или $1,55 на акцию в аналогичном квартале прошлого года при консенсус-прогнозе аналитиков, опрошенных LSEG, в размере $1,85 прибыли на акцию.

Стремительный рост рынка дата-центров в США, связанный с активным внедрением ИИ, ведёт и к увеличению спроса на природный газ. Как сообщается в новом докладе S&P Global на основе модели роста спроса на электроэнергию для ЦОД, если 50 % прироста ёмкости объектов будет обеспечиваться газовыми генераторами и электростанциями, то национальной сети дополнительно потребуется до 50 ГВт.

В результате спрос на природный газ для поддержки работы ЦОД может вырасти до 85 млн м³/день, хотя показатели могут меняться в зависимости от объектов и доступности других источников энергии. Так, если доля природного газа в цепочках генерации энергии будет больше, чем прочих энергоносителей, спрос только дата-центров к 2030 году может подняться и до 170 млн м³/день.

Это противоречит целям по снижению углеродных выбросов, поставленным гиперскейлерам вроде Google, Microsoft и Amazon (AWS), которые, вероятно, те всё равно не смогут добиться. Хотя сжигание природного газа считается более экологичным, чем других видов ископаемого топлива, от CO₂ всё равно никуда не деться. Впрочем, в S&P считают, что природный газ будет служить скорее резервным источником в условиях использования возобновляемой энергетики, отличающейся нестабильными поставками электричества.

Источник изображения: Frantzou Fleurine/unsplash.com

Риски для таких проектов невелики, говорит S&P — газовые станции и генераторы могут использовать уже существующую инфраструктуру газопроводов, из-за чего проблемы с получением дополнительных разрешений на подключение будут минимальными, равно как и сопротивление местных жителей. Большинство подключений можно будет организовать в течение 12 месяцев — это гораздо меньше, чем в случае других проектов по генерации энергии. Это если не будет других проблем вроде нехватки ЛЭП и слабой экономики.

От более масштабного использования природного газа, вероятно, больше всего выиграют Северная Вирджиния и Техас (Даллас-Форт-Уорт), поскольку они ближе всего находятся к площадкам для его добычи — Marcellus и Permian Basin соответственно. Близость упрощает поставки топлива новым частным станциям, не зависящим от регулируемых властями коммунальных предприятий. Впрочем, развитие новых генерирующих мощностей в этих районах ещё слабо, хотя некоторые проекты уже есть. Также прогнозируется, что возобновляемая энергетика позволит к 2035 году вытеснить природный газ из энергосистемы PJM Interconnection, к которой относится и Вирджиния. В Техасе использование этого топлива останется устойчивым.

Рост спроса на электричество со стороны ЦОД должен способствовать и процветанию секторов транспортировки, хранения, переработки и т.п. Основными выгодоприобретателями станут компании вроде Enbridge, Kinder Morgan, TC Energy и Williams Cos. Операторы ЦОД уже местами переходят на природный газ для питания своих объектов. Летом в Wells Fargo прогнозировали, что бум ИИ ЦОД в США сыграет на руку поставщикам природного газа, а в марте EQT Corp и вовсе объявила, что газ сам по себе станет драйвером роста ЦОД.

Компания Equinix запустила свой первый в Южной Африке ЦОД IBX. По информации Datacenter Dynamics, впервые анонсированный ещё в декабре 2022 года дата-центр официально заработал на прошлой неделе. Расположенный в городском округе Джермистон ЦОД JN1 Johannesburg IBX Data Center имеет около 1,9 тыс м² колокейшн-площадей, но со временем площадь должна вырасти до 9,5 тыс. м².

На начальном этапе речь идёт о 700 серверных стойках, но в итоге их число должно вырасти до 3475. Ёмкость поэтапно вырастет с 4 МВт до 20 МВт. Особенностью ЦОД является поддержка СЖО. Ранее компания заявляла, что намерена инвестировать в проект $160 млн. Первыми резидентами ЦОД названы Liquid Intelligent Technologies, Intelys Technology Group, Seacom и WorkOnline Communications, а также Johannesburg Internet Exchange (JINX), принадлежащая INX-ZA. В числе прочих операторов, действующих в окрестностях Йоханнесбурга — Digital Parks Africa, OADC, Digital Realty (Teraco), Vantage, NTT и Africa Data Centers.

По словам представителя Equinix в Южной Африке, новый ЦОД IBX станет мощной платформой для бизнеса и инноваций и поспособствует процветанию не только ЮАР, но и соседних стран. Новый объект должен стать ключевым центром перекрёстной связи на континенте для ряда наиболее быстро развивающихся стран и бизнесов. Первые шаги на континенте Equinix сделала в декабре 2021 года, купив компанию MainOne, «дочка» которой (MDXi) управляет четырьмя объектами общей площадью 5,95 тыс. м² в Нигерии, Гане и Кот-д'Ивуаре.

Источник изображения: Simon Hurry/unsplash.com

ЮАР интересы Equinix не ограничиваются — компания расширяет присутствие в Таиланде, намереваясь поэтапно инвестировать здесь около $500 млн в течение следующих десяти лет. На покупку земли в Бангкоке уйдёт $34 млн. Приобретённых участков площадью 18,7 тыс. м² хватит на строительство двух ЦОД IBX на 3375 стоек. Сроки окончания строительства пока не называются.

В компании утверждают, что Таиланд находится на переднем крае цифрового развития Юго-Восточной Азии и становится ключевым игроком в региональной цифровой экономике. Проект в Бангкоке — ещё один этап стратегии развития связей между Таиландом и остальной частью Юго-Восточной Азии. Новые проекты, предположительно, будут реализованы для обеспечения запросов корпоративных клиентов, а также крупнейших облачных провайдеров — драйвером развития станет близость Таиланда к Камбодже, Лаосу, Мьянме и Вьетнаму, а также «проактивной политике» правительства Cloud First Policy.

Сегодня Equinix уже присутствует в ряде стран и территорий Азиатско-Тихоокеанского региона: Индии, Индонезии, Японии, Сингапуре, Австралии, Южной Корее, Малайзии, в материковом Китае, а также в Гонконге. В Таиланде ведут деятельность и другие операторы ЦОД: Edgnex, Etix Everywhere, NextDC, NTT, STT GDC, CtrlS, Evolution DC, Telehouse, Singtel, True IDC, Digital Edge, Bridge DC, Edge Centres, Supernap и др.