Компания DataDirect Networks (DDN), специализирующаяся на платформах хранения данных для НРС-задач, анонсировала масштабируемую СХД Infinia, разработанную в сотрудничестве с Сандийскими национальными лабораториями (SNL) Министерства энергетики США.

Infinia — программно-определяемое многопротокольное решение с горизонтальным масштабированием, которое подходит для различных сценариев использования. Это могут быть сложные научные задачи, приложения ИИ, большие языковые модели и пр.

Узлами системы могут быть любые серверы с процессорами Intel, Arm или AMD. Говорится, что платформа Infinia может масштабироваться до сотен петабайт. Среди ключевых преимуществ решения разработчик называет простоту управления, высокую производительность и безопасность.

Источник изображения: DDN

Референсная аппаратная платформа представляет собой 1U-узел с 24-ядерным процессором AMD EPYC Genoa. Во фронтальной части предусмотрены отсеки для 12 накопителей SFF формата U.2 (NVMe) с возможностью горячей замены. Предусмотрены два сетевых порта 10GbE и порт 1GbE (все с разъёмами RJ-45), а также слота PCIe 5.0 x16 для HHHL-адаптеров, которые могут предложить до четырёх 200G-портов.

Источник изображения: DDN / StorageNewsletter

Шасси имеет габариты 680 × 450 × 44 мм и весит 22,9 кг. СХД оборудована двумя блоками питания мощностью 850 Вт с сертификатом 80 Plus Platinum. В системе воздушного охлаждения применяются шесть вентиляторов. Диапазон рабочих температур — от +10 до +35 °C.

Hitachi Vantara, «дочка» Hitachi Ltd., специализирующаяся на СХД, управлении данными и цифровых решениях, объявила на конференции SC23 о партнёрстве с Quobyte, занимающейся разработкой высокопроизводительных программно определяемых хранилищ. Цель альянса — создание долговечных масштабируемых решений для хранения данных с доступной ценой. Партнёрство включает и стратегическое сотрудничество в области маркетинга и взаимодействия с клиентами.

Как отмечено в пресс-релизе, интеграция интеллектуальной платформы данных Hitachi Vantara и передовой платформы хранения данных Quobyte «откроет новую эру управления данными, соответствующую меняющимся потребностям современных предприятий и сред HPC». «Объединяя наше мастерство управления данными с возможностями Quobyte в области хранения данных, мы не просто решаем проблемы управления данными, но и поднимаем операционную эффективность на новый уровень», — заявил представитель Hitachi Vantara.

Изображение: Quobyte

Сообщается, что благодаря партнёрству клиентам компаний будут предложены:

• Высочайшая надёжность: бесперебойная работа в сочетании с горизонтально масштабируемой производительностью, а также возможность добавлять и удалять оборудование без простоев в составе базовой функциональности;
• Функции корпоративного уровня: интуитивно понятное управление политиками, надёжные функции безопасности, простое управление, снимки, квоты, а также мультикластерность и многопользовательское окружение — всё с учётом жёстких требований сред HPC;
• Масштабируемая производительность с возможностью управления петабайтами данных и тысячами узлов;
• Доступность и дружественность: устранение разрыва между потребностью в хранилищах для HPC и удобными для пользователя решениями, что делает хранилище для HPC простым, надёжным и доступным с корпоративными функциями.
• Экономическая эффективность за счёт подхода Quobyte, ориентированного на ПО с использованием обычного оборудования, обеспечивающего значительное снижение совокупной стоимости владения (TCO) без ущерба для производительности или простоты управления;
• Клиентоориентированный подход.

В августе этого года израильская компания Xinnor, специализирующаяся на решениях для хранения данных, в том числе программного RAID для современных NVMe SSD, сообщила в ходе саммита Flash Memory Summit о мировом рекорде производительности, установленном с использованием ПО Xinnor xiRAID и 12-ти NVMe SSD Kioxia CM7-R (PCIe 5.0). На SC23 компания обновила рекорд.

На этот раз в тесте были задействованы сразу 24 накопителя Kioxia CM7-V (PCIe 5.0, NVMe). Каждый диск имеет скорость последовательного чтения 14 Гбайт/с и последовательной записи 6,75 Гбайт/с, а на случайных операциях производительность составляет 2,7 млн IOPS и более 600 тыс. IOPS соответственно.

При развёртывании множества таких SSD в системе первостепенное значение приобретает обеспечение надлежащей масштабируемости производительности и целостности данных. Xinnor выполнила тест на сервере Supermicro с двумя 64-ядерными процессорами AMD EPYC Genoa 9534 и 768 Гбайт RAM. Чтобы избежать узких мест, Xinnor создала две группы RAID 5 по 12 дисков так, что каждый массив находился в рамках одного NUMA-домена. Такая конфигурация обеспечивает наивысшую производительность и одновременно защиту данных в случае сбоя диска для каждого RAID, говорит Xinnor.

Изображение: Xinnor

Сообщается, что в последовательных рабочих нагрузках рекордные показатели (см. таблицу ниже) были достигнуты при использовании лишь 16 из 128 доступных ядер, а на случайных операциях xiRAID нагружал на 3–9 % лишь половину ядер. Низкая нагрузка на CPU и универсальность xiRAID, по словам компании, значительно упрощает развёртывание массивов и позволяет эффективно использовать имеющееся оборудование.

Xinnor также проверила работу в деградированном режиме, когда из массива RAID 5 «выпадает» один накопитель. Даже в этом случае производительность остаётся достаточно высокой: более 34 млн и 6 млн IOPS при произвольных чтении и записи соответственно, что эквивалентно 52 % и 75 % от нормальной производительности. При последовательных операциях доступа Xinnor зафиксировала производительность выше 70 % от нормальной.

Заодно Xinnor также протестировала ту же систему, создав 2 группы RAID 6 (2 × 10 + 2). При чтении производительность была сравнима с RAID 5: 64 млн IOPS и 310 Гбайт/с. При записи производительность была ниже: 5,2 млн IOPS и 128 Гбайт/с. Впрочем, по словам Xinnor, xiRAID быстрее, чем любое другое альтернативное решение RAID.

Компания Kioxia, по сообщению ресурса Blocks & Files, свернула проект KumoScale по разработке специализированного ПО для хранилищ данных. Выпуск новых версий не планируется, а новые лицензии на данный продукт предоставляться не будут. Поддержка текущих заказчиков сохранится.

KumoScale — это программный комплекс, нацеленный на максимизацию использования обычных NVMe-накопителей в дата-центрах. Платформа использует NVMe-oF (RDMA или NVMe/TCP) для формирования быстрых масштабируемых блочных хранилищ с низкой задержкой и позволяет управлять сотнями узлов хранения. Платформа обзавелась поддержкой Kubernetes, OpenStack, NVIDIA Magnum IO GPUDirect Storage (GDS) и т.д.

Одна из первых презентаций KumoScale (Изображение: Kioxia/Toshiba)

В уведомлении на сайте Kioxia говорится, что развивать платформу KumoScale после версии 3.22 не планируется. Для продукта теперь осуществляется только техническое обслуживание — компания намерена поддерживать существующих клиентов. Какие-либо комментарии по поводу своего решения Kioxia не даёт.

Платформа KumoScale начала создаваться в североамериканском подразделении Kioxia (тогда ещё Toshiba) в 2016 году. Со временем она обросла функциональностью, но, как отмечает Blocks & Files, дальнейшее развитие фактически сделало бы её прямым конкурентом продуктов, которые создают заказчики Kioxia.

Dell представила на конференции Dell Technologies World 2023 обновление Dell APEX, которое объединяет службы Microsoft Azure, Red Hat и VMware, и обеспечивает улучшенные управление и мобильность приложений и данных в рамках реализации так называемой стратегии «земля-облако» и «облако-земля». Dell также расширила портфолио услуг и подписок APEX.

С точки зрения подхода ground-to-cloud (от земли к облаку) Dell взяла за основу проект Project Alpine и превратила его в совершенно новый каталог продуктов под названием APEX Storage for Public Cloud, перенеся различные службы хранения в публичное облако.

Анонсированный новый сервис Dell APEX Cloud Platforms, по словам компании, представляет собой «портфель полностью интегрированных готовых систем, объединяющих инфраструктуру Dell, ПО и облачные операционные стеки, которые обеспечивают согласованные мультиоблачные операции путём переноса облачных моделей работы в локальные и периферийные среды». На практике это означает, что можно управлять данные и рабочими нагрузками в разных облаках и средах и бесшовно перемещать данных между разными платформами.

Облачные службы, разработанные в сотрудничестве с Microsoft, Red Hat и VMware, включают:

• Dell APEX Cloud Platform for Microsoft Azure, предлагает интеграцию с Microsoft Azure и Arc для формирования и управления единой инфраструктурой, размещённой локально, на периферии или в облаке Azure.
• Dell APEX Cloud Platform for Red Hat OpenShift, призвана упростить разработку приложений на основе контейнеров и управление ими благодаря полной интеграции программного обеспечения и автоматизации с гибридной облачной платформой приложений на базе Kubernetes.
• Dell APEX Cloud Platform for VMware, призвана обеспечить возможность развёртывания платформы облачной виртуализации vSphere в программно-определяемом хранилище Dell.

Компания заявила, что решение Dell APEX Storage for Public Cloud позволит клиентам запускать службы на облачных платформах и безопасно хранить свои данные в инфраструктуре Dell.

Также сообщается, что Dell APEX Block Storage for Amazon Web Services (AWS), Dell APEX Block Storage for Microsoft Azure и Dell APEX File Storage for AWS, разработанные в рамках Project Alpine, сочетают в себе производительность, масштабируемость и устойчивость к киберугрозам хранилищ Dell корпоративного класса с экономикой публичного облака. Следует добавить, что эти решения дополняют службу Dell Apex Protection Storage, которая, по словам компании, уже обслуживает 17 Эбайт данных клиентов в облаках.

Также сообщается об усовершенствованиях Dell APEX Console, которые упрощают обслуживание мультиоблачных хранилищ и кластеров Kubernetes.

• Dell APEX Navigator for Multicloud Storage — SaaS-решение, которое позволяет централизовать, упростить и защитить управление хранилищами Dell APEX Block and File Storage.
• Dell APEX Navigator for Kubernetes — SaaS-решение, которое упрощает управление хранилищем Kubernetes.

Кроме того, Dell сообщила о появлении ещё двух решений:

• Dell APEX Compute, которое предоставляет масштабируемые, безопасные вычислительные ресурсы bare metal в ЦОД, на периферии или в колокейшн-объекте. Клиенты смогут задействовать виртуализированные среды или среды на основе контейнеров, установив гипервизор или операционную систему по своему выбору.
• Dell APEX PC-as-a-Service (PCaaS) поможет компаниям развёртывать новейшие клиентские решения с прогнозируемыми затратами. Организации смогут с его помощью гибкие предложения на срок от 1 до 5 лет с возможностью масштабирования по мере необходимости.

На мероприятии было также объявлено о новом многостороннем сотрудничестве Dell и Databricks в рамках которого локальными данными в корпоративных платформах хранения данных Dell можно будет управлять и использовать посредством Databricks Lakehouse.

На мировом рынке программно определяемых хранилищ данных (SDS), согласно отчёту Enterprise Apps Today, в ближайшие годы ожидается устойчивый рост. Основными драйверами отрасли названы гибкость масштабирования, снижение затрат на обслуживание, удобство интеграции с облачными платформами и возможность централизованного управления независимо от физического расположения устройств.

Концепция SDS предусматривает отделение сервисов хранения данных от оборудования.  По сравнению с обычными архитектурами такие решения обладают более высокими показателями гибкости. Подход обеспечивает бесшовную интеграцию нескольких типов хранилищ, таких как блочные, файловые и объектные, в рамках единого интерфейса управления.

Источник изображения: Enterprise Apps Today

По оценкам, объём глобального SDS-рынка в 2022 году составил приблизительно $17,85 млрд. В период с 2023 по 2033 год прогнозируется показатель CAGR (среднегодовой темп роста в сложных процентах) на уровне 24,99 %. В результате, размер отрасли в денежном выражении достигнет $106,33 млрд в 2030 году и $207,62 млрд в 2033-м.

В 2023 году, полагают аналитики, затраты в сегменте SDS составят приблизительно $22,31 млрд. В 2024-м этот показатель может подняться до $27,89 млрд, а в 2025-м — до $34,86 млрд. Северная Америка является ведущим рынком SDS-решений, что обусловлено растущим внедрением облачных платформ, аналитики больших данных и технологий виртуализации. В Европе также наблюдается увеличение спроса на SDS-платформы.

Вместе с тем выделяются и несколько сдерживающих факторов. Среди них названы вопросы обеспечения безопасности, возможная несовместимость с существующей инфраструктурой хранения, отсутствие стандартизации и ограниченная осведомлённость компаний о новых решениях.

Китайская компания Lenovo анонсировала DAS ThinkSystem D4390, предназначенную для создания программно определяемых СХД высокой плотности. Новинка, как утверждается, подходит для HPC-сервисов, объектного хранения, частных и гибридных облаков, аналитики, а также резервного копирования и архивирования больших объёмов информации.

Источник изображения: Lenovo

Допускается применение накопителей SAS HDD, NL-SAS HDD и SAS SSD для обеспечения высокой производительности и большой ёмкости. В корпусе предусмотрены посадочные места для 90 устройств LFF с возможностью горячей замены (поддерживаются 12 модулей SAS SSD объёмом до 800 Гбайт каждый). К примеру, могут применяться 18-Тбайт жёсткие диски NL-SAS со скоростью вращения шпинделя 7200RPM: в этом случае суммарная «сырая» ёмкость достигает 1,62 Пбайт. Могут быть организованы массивы RAID 0/1/10/5/50/6/60 или JBOD. Допускается использование хост-контроллеров ThinkSystem RAID 940-8e PCIe 12Gb, ThinkSystem 440-16e SAS/SATA PCIe Gen4 12Gb HBA и ThinkSystem 440-8e PCIe 12Gb SAS/SATA HBA.

Источник изображения: Lenovo

Доступны четыре 24-Гбит/с порта Mini-SAS HD (SFF-8644). Возможно последовательное соединение шасси для масштабирования СХД. Шасси оборудовано четырьмя блоками питания 80 Plus Titanium мощностью 1300 Вт каждый с возможностью горячей замены и резервированием. Система воздушного охлаждения включает пять 80-мм вентиляторов с горячей заменой. Диапазон рабочих температур — от +5 до +35 °C. 4U-шасси имеет габариты 175,3 × 446,0 × 1080,0 мм. Минимальная масса составляет 45 кг. На новинку предоставляется трёхлетняя гарантия.

Современные системы искусственного интеллекта оперируют громадными объёмами данных, и что немаловажно, требуют загрузки этих данных с высокой скоростью. Поэтому компания PEAK:AIO представила новую версию платформы AI Data Server, предназначенного специально для подобного класса задач.

Обновлённая платформа, по словам компании-разработчика, вдвое производительнее предыдущего варианта и обеспечивает линейную производительность на уровне 80–120 Гбайт/с при использовании единственного узла хранения данных. Стоимость владения при этом снижена на 70%. Такая производительность достигается за счёт сочетания технологий GPUDirect и NVMe-oF.

Источник изображений здесь и далее: PEAK:AIO

Платформа AI Data Server относится к программно определяемым решениям, она разработана PEAK:AIO в сотрудничестве с крупными производителями серверного оборудования, такими, как Dell, Supermicro и GIGABYTE. В роли поставщика выступит компания PNY Technologies.

Технические характеристики новой платформы AI Data Server

Новый вариант базируется на процессорах последнего поколения, использует шину PCI Express 5.0 и сетевые решения NVIDIA ConnectX-6/7, а также накопители с интерфейсом NVMe. Базовая конфигурация имеет форм-фактор 2U и может располагать полезным объёмом от 50 до 700 Тбайт, а обслуживать при этом такая СХД может до 10 вычислительных серверов вроде NVIDIA DGX A100.

Стоимость новой платформы PEAK:AIO будет начинаться с отметки $8 тысяч за один узел хранения данных. В настоящее время новинка уже проходит бета-тестирование, а массовые поставки начнутся во втором квартале текущего года.