Технологии искусственного интеллекта (ИИ) сегодня бурно развиваются и требуют всё более серьёзных вычислительных мощностей. Но наряду с наращиванием этих мощностей растут требования и к сетевой подсистеме, поэтому крупные компании и исследовательские организации ищут всё новые способы оптимизации инфраструктуры.

Компания Meta✴ в сотрудничестве с Массачусетским технологическим институтом (MIT) и рядом прочих исследовательских организаций опубликовала данные любопытного эксперимента, в котором ИИ-кластер мог менять топологию своего интерконнекта с помощью механической «роборуки».

Система получила название TopoOpt, поскольку вычислительные узлы в ней использовали полностью оптическую сеть с оптической же патч-панелью. Эта сеть объединяла 12 вычислительных узлов ASUS ESC4000A-E10, каждый из которых был оснащён ускорителем NVIDIA A100, сетевыми адаптерами HPE и Mellanox ConnectX-5 (100 Гбит/с) с оптическими трансиверами.

Источник здесь и далее: USENIX

Наиболее интересное устройство в эксперименте — оптическая патч-панель Telescent, оснащённая механическим манипулятором, способным производить перекоммутацию на лету. Эта «роборука» работала под управлением специализированного ПО, целью которого ставилось нахождение оптимальной сетевой топологии и сегментации сети применительно к различным задачам машинного обучения.

Система с перекоммутируемой оптической сетью не требует энергоёмких высокоскоростных коммутаторов и обеспечивает ряд других преимуществ

Такая роботизированная патч-панель не столь расторопна, как оптические коммутаторы Google с микрозеркальной механикой, но стоит впятеро дешевле и имеет больше портов. Опубликованные экспериментальные данные уверенно свидетельствуют о том, что топология «толстого дерева» (fat tree), использующая несколько слоёв коммутаторов, не оптимальна и даже избыточна для ряда нейросетевых задач.

К тому же перекоммутируемая оптическая сеть без традиционных высокоскоростных коммутаторов требует меньше оборудования, а значит, может быть не только быстрее сети fat tree в ряде ИИ-задач, но и существенно дешевле в развёртывании и поддержании в рабочем состоянии — как минимум за счёт отсутствия затрат на питание множества коммутаторов.

Оператор дата-центров Aruba Global Cloud приобрёл две гидроэлектростанции на итальянской реке Брембо. Они обеспечат дополнительной «зелёной» энергией кампус компании в провинции Бергамо. Оператор всерьёз подходит к реализации «зелёных» проектов — теперь у компании в собственности есть сразу девять ГЭС и ряд других источников экологически безопасной энергии.

Источник изображения: Aruba

Мощность новых ГЭС Paladina и Ponte Briolo составляет 2 МВт, они расположены на одной реке недалеко от ЦОД Aruba, расположенного на территории муниципалитета Понте-Сан-Пьетро провинции Бергамо. Ещё одна из уже имеющихся в распоряжении компании электростанций тоже расположена на той же реке. Суммарная мощность всех ГЭС компании достигает 9,2 МВт, а ежегодно компания намерена получать от них порядка 50 ГВт·ч.

Как сообщает DataCenter Dynamics, Aruba инвестировала немалые средства в «зелёные» источники энергии. Так, кампус в Понте-Сан-Пьетро (30 тыс. м²) питается от солнечных элементов совокупной мощностью почти 5 МВт, а также получает энергию от ГЭС и геотермальных источников. Но этого мало, поскольку в перспективе планируется нарастить площадь кампуса до 200 тыс. м² , а мощность довести до 60 МВт. Также у Aruba есть два объекта в городе Ареццо, а ещё два — в Риме и в чешском Ктише — пока строятся. Экологически чистая энергия будет поставляться как минимум на некоторые из этих площадок. В частности, солнечные панели будут активно применяться в римском ЦОД.