Совместное предприятие European High Performance Computing (EuroHPC JU) объявило о запуске нового исследовательского проекта Inno4scale с целью разработки инновационных алгоритмов, которые позволят в полной мере использовать потенциал экзафлопсных и постэкзафлопсных HPC-систем.

Консорциум Inno4scale включает Барселонский суперкомпьютерный центр (BSC), SCAPOS, Центр высокопроизводительных вычислений Штутгартского университета (HLRS) и ассоциацию PRACE. Он будет финансировать разработку новых подходов к алгоритмам, выделяя средства на небольшие проекты, которые покажут эффективность для приложений с поддержкой экзафлопсных вычислений. Бюджет проекта Inno4scale составляет €5 млн.

Источник изображения: Inno4scale

Консорциум разработает и организует конкурс для предложений на основе механизма каскадного финансирования, приём которых продлится до конца сентября. Предложения будут оцениваться осенью 2023 года внешними экспертами исходя из инновационности дизайна и влияния на повышение эффективности работы экзафлопсных систем. Разработки, как ожидается, начнутся в 2024 году и продлятся год. Наиболее эффективные алгоритмы будут в дальнейшем использоваться для HPC, что, как ожидается, приведёт к значительному повышению производительности и энергоэффективности.

EuroHPC планирует построить два экзафлопсных суперкомпьютера для Европы. В прошлом году было объявлено, что в Юлихском суперкомпьютерном центре (JSC) недалеко от Аахена (Германия) будет установлен JUPITER (Joint Undertaking Pioneer for Innovative and Transformative Exascale Research). А в июне стало известно, что вторая экзафлопная система будет построена консорциумом Jules Verne во Франции.

Разработчик решений в области генеративного ИИ MosaicML, недавно перешедший в собственность Databricks, сообщил о хороших результатах в обучении больших языковых моделей (LLM) с использованием ускорителей AMD Instinct MI250 и собственной платформы.

Компания рассказала, что подыскивает от имени своих клиентов новое «железо» для машинного обучения, поскольку NVIDIA в настоящее время не в состоянии обеспечить своими ускорителями всех желающих. MosaicML пояснила, что требования к таким чипам просты:

• Реальные рабочие нагрузки: поддержка обучения LLM с 16-бит точностью (FP16 или BF16) с той же сходимостью и качеством конечной модели, что и при обучении на системах NVIDIA.
• Скорость и стоимость: конкурентоспособные производительность и соотношение производительности и стоимости.
• Разработка: минимальные изменения кода по сравнению с её существующим стеком (PyTorch, FSDP, Composer, StreamingDataset, LLM Foundry).

Источник изображений: MosaicML

Как отметила компания, ни один из чипов до настоящего времени смог полностью удовлетворить все требования MosaicML. Однако с выходом обновлённых версий фреймворка PyTorch 2.0 и платформы ROCm 5.4+ ситуация изменилась — обучение LLM стало возможным на ускорителях AMD Instinct MI250 без изменений кода при использовании её стека LLM Foundry.

Некоторые основные моменты:

• Обучение LLM было стабильным. С высокодетерминированным обучающим стеком LLM Foundry обучение LLM MPT-1B на ускорителях AMD MI250 и NVIDIA A100 дало почти идентичные кривые потерь при запуске с одной и той же контрольной точки. Исследователи даже смогли переключаться между ускорителями AMD и NVIDIA в течение тренировочного прогона.
• Производительность была конкурентоспособной с существующими системами A100. Исследователи профилировали пропускную способность обучения моделей MPT с параметрами от 1 до 13 млрд и обнаружили, что скорость обработки MI250 на один ускоритель находится в пределах 80 % от A100-40GB и в пределах 73 % от A100-80GB. Как ожидает компания, этот разрыв сократится по мере улучшения программного обеспечения AMD.

При этом никаких изменений в коде не потребовалось.

Все результаты получены на одном узле из четырёх MI250, но компания работает с гиперскейлерами для проверки возможностей обучения на более крупных кластерах AMD Instinct. «В целом наши первоначальные тесты показали, что AMD создала эффективный и простой в использовании программно-аппаратный стек, который может конкурировать с NVIDIA», — сообщила MosaicML. Это важный шаг в борьбе с доминирующим положением NVIDIA на рынке ИИ.

Газете «Коммерсантъ» стало известно о выходе российского производителя серверов YADRO из консорциума OpenPOWER Foundation (OPF), созданного IBM, Google, NVIDIA, Mellanox Technologies и Tyan, в котором он имел статус «платинового участника» с эксклюзивным доступом к разработкам процессорной архитектуры POWER компании IBM. Сейчас в консорциум входят несколько сотен членов.

В YADRO пояснили «Коммерсанту», что решение было принято«в связи с очевидными организационными сложностями в поддержании высокого темпа дальнейшей совместной работы и с учётом стратегического долгосрочного выбора в пользу архитектуры RISC-V». Сейчас открытая процессорная архитектура RISC-V обычно используется для создания решений с низкой производительностью, хотя, помимо целого ряда ИИ-ускорителей, есть прототипы достатчно современных серверных CPU, например, от Ventana или SOPHGO.

Будучи участником OPF, YADRO имела доступ к предоставляемой IBM совместной разработке архитектуры POWER, на базе которой выпускала серверы Vesnin и СХД Tatlin. Решения YADRO используются в том числе операторами для «закона Яровой», а также госструктурами. По итогам IV квартала 2021 года, согласно данным IDC, лидерами российского рынка СХД в денежном выражении стали Huawei, YADRO и Dell с долями 39,1 %, 20,9 % и 9,5 % соответственно, но по объёму поставленных ёмкостей лидировала YADRO, опередившая Huawei и Dell. В целом, компания в 2021 году показала хороший рост, да и прошлый год, судя по всему, был удачным.

Фото: YADRO

Эксперты отмечают, что после введения санкций дальнейшая разработка POWER-решений могла стать затруднительной. Вместе с тем в портфолио YADRO уже есть отечественный разработчик RISC-V решений — компания Syntacore, которая не так давно вошла в состав правления RISC-V International. Также YADRO в 2023 году открыла открыл центр разработки в Беларуси, который, как ожидается, также займётся развитием решений RISC-V. Ещё одним российским разработчиком того же профиля является Cloudbear, долю в котором два года назад получил владелец «Байкал электроникс».

Примечательно, что и создание OpenPOWER Foundation, и дальнейшее открытие POWER ISA связывают с желанием IBM обойти антикитайские санкции ради продолжения сотрудничества с Inspur, третьим по величине прозводителем серверов в мире, на которого в конечном итоге США неоднократно всё же накладывали ограничения. Впоследствии столь тесная дружба между IBM и Inspur даже привела к судебному разбирательству внутри Китая. Любопытно, что когда-то в состав OpenPOWER Foundation входила ещё одна российская компания, «Рикор».

Еврокомиссия (ЕК) представила протекционистскую Стратегию экономической безопасности ЕС, которая ограничит торговлю и обмен технологиями с «недружественными» странами. Пакет документов опубликован на сайте ЕК. В случае принятия Стратегии ЕС запретит создание ИИ-технологий, квантовых и суперкомпьютеров, современной микроэлектроники и иных передовых технологий в Китае и России, а при необходимости и в других странах.

Запретом на торговлю и обмен технологиями с «недружественными» странами ЕК хочет защитить себя от экономических рисков, в том числе иностранных санкций против ЕС. ЕС хочет контролировать иностранные инвестиции и наращивать собственный экспорт. Более всего незащищенными Евросоюз себя ощущает в таких стратегических технологиях, как продвинутые полупроводники, квантовые компьютеры, биотехнологии, источники чистой энергии и т.д.

К сентябрю 2023 года ЕС примет список технологий двойного назначения, экспорт которых во все «недружественные» страны будет ограничен. Этот список должен будет избавить Запад от «зависимости от риска их использования для нарушения прав человека или использования в военных целях», заявила замглавы Еврокомиссии. Для вступления Стратегии в силу ее должны утвердить Совет ЕС и Европарламент.

Напрямую «недружественные» страны в документе не называются. ЕК отмечает, что причиной разработки Стратегии стала пандемия, политика РФ, «враждебные экономические действия, кибератаки и вмешательство в выборы, а также рост напряженности на мировой арене». На пресс-конференции, посвященной Стратегии, глава внешнеполитической службы ЕС отметил, что экспортный контроль распространится не только на Китай и Россию, но впоследствии, в случае необходимости, и на весь мир, в зависимости от их отношения к украинскому конфликту и к подъему Китая.

По сути,Брюссель хочет расширить себе полномочия и больше вмешиваться в то, как европейские компании инвестируют и торгуют по всему миру. Реализация новой стратегии будет осуществляться через «торговые соглашения со странами-партнерами, в рамках международного миропорядка, основанного на правилах, и многосторонних институтов, таких как ВТО, а также путем инвестиций в рамках программы «Глобального портала» (была принята ЕС как ответ на китайский проект «Один пояс — один путь»).

Банк Уралсиб — в партнерстве с Ассоциацией российских банков и при поддержке Финансового университета при Правительстве РФ — проводит Хакатон «Uralsib Hack: генеративный интеллект в банках». Хакатон пройдет с 7 по 21 июня 2023 года и будет посвящен инновационным решениям для банков на основе технологий генеративных нейросетевых моделей.

Участники хакатона смогут предложить собственную идею или разработать прототип на основе 9 кейсов, предоставленных Банком Уралсиб: «Контент-аналитик», «Журналист», «Генератор дизайна», «Диалоговый чат-бот», «Цифровой ассистент», «Генератор опросов», «Дата-ассистент», «Ассистент маркетолога», «Референт». Это могут быть уже внедренные решения, концепты, а также общее описание возможностей компаний в сфере генеративного искусственного интеллекта.

Источник: Uralsib Hack

В рамках хакатона участники будут работать в командах по 1–5 человек, получат экспертные консультации по своему проекту и при допуске команды к Турниру идей смогут побороться за призовой фонд 300 000 руб., а также за возможность получить гранты на пилотирование до 5 000 000 руб. от Банка Уралсиб.

Ключевая задача команд-участников Хакатона — придумать и предложить работоспособный прототип на базе открытых источников. На этапе создания концептов для банка основное внимание будет уделено рабочим прототипам решений. После проведения мероприятия переход с открытого к серверному решению будет осуществляться в формате пилотирования проекта в Банке Уралсиб.

Хакатон пройдет в три последовательных этапа: отборочный тур, финальный тур, Турнир идей. На Турнире идей лучшие решения финалистов будут представлены широкой аудитории. Проекты-призеры и победители, помимо призов Хакатона, будут отобраны для заслушивания на заседание комиссии по инновациям Банка Уралсиб с возможностью получения гранта на пилотирование.

Для участников хакатона «Uralsib Hack: генеративный интеллект в банках» будут доступны образовательные мероприятия акселерационной программы Бизнес-инкубатора Финансового университета «Лидеры инноваций».

Более подробно о Хакатоне и подаче заявок можно узнать на сайте Uralsib Hack.

1 июня Совкомбанк и Фонд «Сколково» подвели итоги командного онлайн-хакатона Sovcombank Team Challenge 2023. Организаторам удалось привлечь к участию около тысячи ИТ-специалистов со всей страны. Соревнование стало одним из самых масштабных для разработчиков, обладающих компетенциями для выполнения наиболее сложных проектов по автоматизации HR-процессов в компании. Общий призовой фонд Sovcombank Team Challenge 2023 составил 1 млн руб.

В хакатоне приняли участие более 960 ИТ-специалистов из 96 городов России. В ТОП-5 городов по количеству участников вошли Москва (32 %), Санкт-Петербург (14 %), Екатеринбург (10 %), Нижний Новгород (7 %) и Новосибирск (4 %).

После прохождения всех конкурсных этапов в финал соревнования вышли 15 сильнейших команд. Три лучшие разделили призовой фонд в 1 млн руб.

Источник изображения: Skolkovo Fintech Hub

Победителем хакатона стала команда «djidjya team» с проектом, в котором реализован самый широкий функционал платформы для автоматизации процессов рекрутмента: продвинутая интеграция с сервисами видеоконференций, мессенджерами и календарем; чистый и структурированный код, выдержанный в одном стиле; удобный и качественный интерфейс; усиленная безопасность платформы. Также жюри отметило слаженную работу команды и отличную презентацию материала во время финального питчинга. По условиям конкурса команда, занявшая первое место, получит денежный приз в размере 500 000 руб.

Второе место заняла команда «Naming in process», которая показала продуманное  решение с удобным интерфейсом. Также «Naming in process» проработали варианты масштабируемости и адаптивности бизнес-решения. Жюри отметило профессионализм команды и отличное понимание возможностей языка программирования Ruby On Rails (RoR). Приз команды составит 300 000 руб.

Третье место присуждено команде «Flareon», которая смогла создать рабочее приложение с выдержанным и содержательным интерфейсом. В качестве награды за третье место команда получит 200 000 руб.

Альберт Борис, заместитель председателя правления Совкомбанка: «Для нас это уже четвертое онлайн-соревнование для ИТ-специалистов, организованное совместно со «Сколково», каждый раз меняются направления по разработке цифровых решений. В этот раз перед участниками стояла нестандартная задача, требующая конкретного функционирующего решения – создать цифровую платформу для автоматизации полного цикла рекрутмента. Итоги хакатона показали, что многие команды справились с задачей и представили рабочие проекты, которые можно применить в бизнесе.

Группа Совкомбанк продолжает развиваться, и мы активно наращиваем нашу команду ИТ. Онлайн соревнования один из хороших способов находить самых талантливых ребят из разных уголков нашей страны».

Павел Новиков, директор Sk Fintech Hub: «Более 4000 специалистов из разных регионов России приняли участие в наших совместных хакатонах с Совкомбанком. Благодаря подобным коллаборациям и новым форматам нам удается решать ИТ-задачи любой сложности, вдохновлять и привлекать талантливых ребят в ИТ и финсектор».

Мероприятие прошло при поддержке информационных партнеров Rspectr, MobileCom, Plusworld, ICT, CIS, GlobalCIO, ServerNews.

Корпорация Intel, по сообщению ресурса Businesskorea, планирует открыть в Сеуле (Южная Корея) специализированную лабораторию для тестирования компонентов для дата-центров. Ожидается, что новая исследовательская площадка начнёт функционировать до конца текущего года.

Информации о размере лаборатории и планируемой численности персонала пока нет. Но известно, что Intel в рамках данной инициативы намерена взаимодействовать с южнокорейскими поставщиками серверных компонентов — прежде всего с Samsung и SK hynix. Речь идёт о тестировании передовых типов памяти, в том числе DRAM с поддержкой стандарта Compute Express Link (CXL) и DDR5.

«ЦОД-лаборатория в Сеуле будет играть важную роль в проверке и сертификации памяти DRAM для использования в оборудовании с процессорами Intel. Ожидается, что Intel в рамках новой исследовательской площадки начнёт более тесно сотрудничать с Samsung Electronics и SK hynix», — заявили осведомлённые лица.

Источник изображения: Intel

Отмечается также, что Intel намерена открыть в общей сложности шесть новых лабораторий. Помимо Южной Кореи, такие структуры появятся в США, Мексике, Китае, Тайване и Индии. Все они сосредоточатся на работах, связанных с полупроводниковыми и другими компонентами для серверов. Вместе с тем компания отказалась от проекта огромной лаборатории по разработке систем охлаждения для ЦОД будущего, который оценивался в $700 млн.

Для Intel важно укрепление позиций на рынке ЦОД. Дело в том, что выручка корпорации в соответствующем сегменте сокращается. По итогам I четверти 2023 финансового года группа Datacenter and AI Group (DCAI) показала снижение продаж в годовом исчислении на 39 % — с $6,1 млрд до $3,7 млрд. Операционные убытки составили $518 млн против $1,4 млрд прибыли годом ранее.

Компания Red Hat, принадлежащая IBM, в настоящее время проводит сокращение штата, о котором было объявлено в апреле этого года. Одной из жертв этого раунда увольнений стал программный менеджер проекта Fedora, в рамках которой производится разработка одноимённого дистрибутива Linux. Минувшая пятница стала последним днём работы Бена Коттона (Ben Cotton), занимавшего эту должность последние пять лет.

В обязанности Коттона входила координация действий участников сообщества Fedora и заинтересованных сторон, включая Red Hat и поставщиков оборудования, управление выборами в сообществе Fedora и т.д. Коттон был в числе тех, кто реализовал программу CentOS Stream. «Хотя я больше не буду вносить свой вклад в качестве программного менеджера Fedora, я был участником Fedora задолго до того, как присоединился к Red Hat, и я не позволю им отнять это у меня. Я по-прежнему буду находиться рядом с Fedora »,— пообещал Коттон в своём блоге.

Изображение: Fedora

Он отметил, что добился определённых успехов в работе над проектом, добавив, что это было бы невозможно без работы, проделанной предшественниками. Red Hat через два года после поглощения со стороны IBM сначала лишилась своего главы Джеймса Уайтхерста, а затем и главы управляющего совета CentOS Каранбира Сингха — оба посвятили своей работе более десяти лет. В это году IBM объявила, что полностью окупила приобретение Red Hat за $34 млрд.

С 22 мая по 1 июня Совкомбанк и Фонд «Сколково» проведут Sovcombank Team Challenge 2023 — онлайн-хакатон по разработке платформы для автоматизации процессов подбора персонала с призовым фондом в 1 млн рублей. Уже сейчас получено около 600 заявок от специалистов. Подать заявку на участие в мероприятии можно до 21 мая на сайте https://scbteamchallenge.sk.ru/.

Совкомбанк и Sk Fintech Hub проводят хакатон уже в четвёртый раз, и с каждым годом охват участников онлайн-соревнования становится всё шире. В этом году заявок поступило даже больше, чем планировали организаторы. Высокий интерес к хакатону проявляют ИТ-специалисты со всей страны: на сегодняшний день больше всего участников из Москвы (28,31 %) и Санкт-Петербурга (16,85 %), а всего заявки поступили из 96 российских городов.

Претендентами на участие в соревновании становятся программисты разной квалификации. Большая часть заявок (51,0 %) поступила от разработчиков уровня Junior, на втором месте — специалисты уровня Middle (26,8 %). Доля регистраций от Senior-разработчиков составила 10,0%. Также были получены заявки от программистов уровня Trainee (7,3 %) и Lead — 4,9 %.

Ключевая задача Sovcombank Team Challenge в этом году — разработка платформы для автоматизации процессов подбора персонала: с момента составления заявки на вакансию до трудоустройства сотрудника.

Sovcombank Team Challenge 2023 проходит при поддержке информационных партнёров: Rspectr, MobileCom, Plusworld, ICT, CIS, GlobalCIO, ServerNews.

Детали онлайн-соревнования можно узнать на сайте scbteamchallenge.sk.ru.

Компания Dell Technologies Inc. запустила три новых сервиса: Dell Managed Developer Cloud, Dell Managed Services for MLOps и Colocation with Dell Technologies Services, предназначенных для разработчиков решений в области машинного обучения и специалистов по работе с данными. По словам Dell, новые сервисы позволят повысить производительность их работы и ускорить внедрение инноваций.

• Dell Managed Developer Cloud предоставляет разработчикам доступ к виртуальным машинам, контейнерам и API в облачной среде с управлением по принципу «инфраструктура как код». Благодаря упрощённому управлению инфраструктурой можно уделять больше времени непосредственно разработке.
• Dell Managed Services for ML Ops — комплексная платформа для разработки моделей машинного обучения с управлением всем жизненным циклом. Решение позволяет упростить развёртывание и обслуживание ИИ-систем.
• Colocation with Dell Technologies Services — это управляемый сервис, который позволяет оптимизировать процесс интеграции с облаком, упростить развёртывание и повысить эффективность операций с размещёнными в облаке приложениями, использующими внутренние системы и данные компании. Dell заявила, что заключила соглашения с рядом провайдеров услуг колокации, чтобы обеспечить гибкий выбор местоположения и инфраструктуры для своих клиентов.

Dell заявила, что новые сервисы предназначены для стимулирования роста цифрового бизнеса, напрямую зависящего от скорости получения аналитических данных и разработки новых цифровых продуктов и сервисов. По данным IDC, разработчики тратят менее 20% своего времени на разработку, большей частью занимаясь управлением инфраструктурой и ожиданием IT-ресурсов. Точно так же на продуктивность жалуются и специалисты по данным.

Изображение: Dell

Ещё одна проблема, которую позволят решить новые сервисы — высокая стоимость разработки решений в области машинного обучения и искусственного интеллекта (ИИ). Многие компании прибегают к простым в использовании публичным облачным сервисам, а в итоге сталкиваются с проблемами интеграции своих существующих систем и данных. Кроме того, обучение больших языковых моделей (LLM) требует больших вычислительных мощностей и громадных наборов данных, что в свою очередь требует больших затрат.

Существуют также проблемы с конфиденциальностью, из-за чего компании стремятся выполнять разработку внутри своей инфраструктуры. Однако создание частного облака для этой цели влечёт за собой дополнительные проблемы, поскольку компаниям не хватает навыков работы с облачными технологиями для внедрения решений с нужной им скоростью. Новые сервисы Dell призваны решить эти проблемы и повысить продуктивность разработчиков.

Dell использует для новых сервисов гибкую модель ценообразования. Цены на Managed Developer Cloud зависят от количества контейнеров и виртуальных машин. Стоимость Managed Services for ML Ops зависит от количества вычислительных узлов и хранилищ. Расценки сервиса Colocation with Dell Technologies Services зависят от количества узлов.