Система мониторинга эффективности задач на суперкомпьютере НИУ ВШЭ включена в Реестр российского ПО
Разработанная в Высшей школе экономики система мониторинга эффективности задач на суперкомпьютере HPC TaskMaster включена в Реестр российского программного обеспечения. Для этого был выполнен большой комплекс подготовительных работ. Доказав эффективность системы, Вышка готова распространять ее и в другие университеты и компании.
С момента появления суперкомпьютеров обеспечение эффективности их использования является важнейшей задачей. Для крупных вычислительных кластеров разрабатываются собственные системы мониторинга. Суперкомпьютер «cHARISMa», который используется сотрудниками, преподавателями и студентами Высшей школы экономики для проведения научных исследований, не стал исключением.
Отечественная программная система HPC TaskMaster была разработана с применением научного подхода и внедрена в 2022 году. Она помогает пользователям суперкомпьютера эффективнее выполнять вычисления: предоставляет информативные отчеты о выполненных задачах, указывает на ошибки, выдает рекомендации по повышению эффективности. Кроме того, система позволяет эффективнее использовать ресурсы суперкомпьютера в целом, экономя дорогостоящее машинное время. По статистике, в первом полугодии 2023 года система позволила повысить эффективную производительность суперкомпьютера на 20,5%.
Для включения в Реестр российского программного обеспечения пришлось выполнить довольно объемный комплекс работ по пересмотру используемых технологий и подробному документированию разработанной системы. Например, пришлось отказаться от использования в качестве базовой операционной системы Linux Ubuntu из-за лицензионных ограничений. Была улучшена безопасность кода, сформирован тестовый набор данных для демонстрации работы эксперту, разработаны варианты развертывания системы как в docker-контейнере, так и в виде образа виртуальной машины.
Далеко не всякая зарегистрированная российская программа может попасть в Реестр российского программного обеспечения. Это видно из статистики: в реестре на сегодняшний день около 18 тысяч программ, а количество обычных свидетельств о регистрации программ, выданных Роспатентом, приближается к 300 тысячам. Для включения в реестр программа должна удовлетворять множеству законодательных и технических требований.
Дмитрий Бондарь, старший директор по цифровой трансформации НИУ ВШЭ
«Продуктивная работа современного суперкомпьютерного комплекса в многопользовательском режиме невозможна без создания программной системы по контролю и оптимизации потока задач. В Вышке такой системой стал HPC TaskMaster. Над его разработкой на протяжении нескольких лет трудилась команда отдела суперкомпьютерного моделирования, при этом разработка базируется на опыте всего коллектива университета, выполняющего исследования при помощи суперкомпьютера.
В современном мире скорость проверки гипотез, обучения искусственного интеллекта и решения инженерных задач на высокопроизводительных машинах определяет конкурентоспособность организации в целом. Без автоматизации процессов взаимодействия с суперкомпьютером новые задачи могут просто не дождаться своей очереди или потерять актуальность.
Доказав эффективность системы у нас, мы готовы ее распространять и в другие университеты и компании. Таким образом мы хотим поделиться своим опытом и повысить эффективность заинтересованных научных и производственных коллективов.
Включение HPC TaskMaster в Реестр российского программного обеспечения — существенный шаг в этом направлении. Адаптация программного обеспечения и его описание под требования реестра — трудоемкий процесс, но он показывает, что продукт соответствует всем требованиям российского законодательства и готов к использованию за пределами Вышки».
Павел Костенецкий, начальник отдела суперкомпьютерного моделирования НИУ ВШЭ
«Наш отдел не просто вручную администрирует суперкомпьютер. Мы создали систему, которая теперь нам и помогает. Она в сотни раз превосходит инженера по скорости анализа эффективности вычислений, выполняющихся на вычислительном кластере. Соответственно, эффективность работы нашего суперкомпьютерного центра стала выше, чем классического центра с ручным отслеживанием ошибок пользователей.
Наша система сама может рекомендовать пользователям суперкомпьютера, что нужно улучшать в их вычислительных задачах, а при серьезных ошибках даже прекращать некорректно запущенные вычисления одного пользователя в пользу запуска эффективных задач другого. Этот подход позволяет не допускать простоя оборудования, повышает количество одновременно выполняемых исследований».
Вам также может быть интересно:
Вышка исследует потребности глухих
В последнее воскресенье сентября в мире традиционно отмечается День глухих. В этом году факультет социальных наук (ФСН) Высшей школы экономики присоединился к празднику и совместно с Московской городской организацией Всероссийского общества глухих (МГО ВОГ) запустил исследование потребностей глухих и слабослышащих москвичей в социальных услугах и доступности среды.
В Высшей школе экономики открылась межфакультетская Музейная лаборатория
Вышка запустила межфакультетскую Музейную лабораторию, которая станет устойчивым центром экспертной поддержки в сфере музейного дела. Ее миссия связана с изменением современных моделей восприятия культуры и трансформацией институциональной среды. Лаборатория специализируется на модернизации музейных практик и повышении престижа музеев, формируя пространство для профессионального диалога и внедрения инноваций.
30 студентов из 19 университетов приняли участие в исследовательской экспедиции НИУ ВШЭ в «Новом Херсонесе»
В рамках программы студенческих экспедиций «Открываем Россию заново» при поддержке программы Росмолодежи «Больше, чем путешествие», президентской платформы «Россия — страна возможностей», а также Симферопольской и Крымской епархии НИУ ВШЭ на базе Школы молодого гуманитария провела исследовательскую экспедицию на территории музейно-храмового комплекса «Новый Херсонес» в Севастополе. По ее итогам будут разработаны предложения по организации просветительских проектов в области формирования исторической памяти молодежи о роли Херсонеса, Крыма и византийского наследия в истории российской культуры и государственности.
Большие группы студентов эффективнее используют ИИ в обучении
Исследователи Института образования и факультета экономических наук НИУ ВШЭ узнали, от каких факторов зависит качество групповой работы студентов, когда они выполняют ее в сотрудничестве с ИИ. Оказалось, что, помимо уровня знаний команды, важен размер группы: чем она больше, тем эффективнее работа. Статья ученых опубликована в журнале Innovations in Education and Teaching International.
Завершила работу Первая Кавказская школа по экспериментальным исследованиям и когнитивным наукам
С 17 по 21 сентября на базе «Горная легенда» Адыгейского государственного университета прошла Первая Кавказская школа по экспериментальным исследованиям и когнитивным наукам. Организаторами мероприятия выступили Лаборатория экспериментальной лингвистики АГУ, Центр языка и мозга и Центр социокультурных и этноязыковых исследований НИУ ВШЭ. Школа собрала более 50 участников — студентов, аспирантов и молодых исследователей из разных регионов России, а также слушателей и спикеров из Франции, Сербии, Китая, Турции, Казахстана и Узбекистана.
Испугать и обмануть: почему люди поддаются на уловки мошенников
В НИУ ВШЭ прошел IX Фестиваль финансовой грамотности и предпринимательской культуры для старшего поколения. Почему люди верят мошенникам и как можно защитить себя и близких от угрозы кражи денег, обсудили эксперты-психологи на дискуссии, состоявшейся в рамках фестиваля.
Бренд-медиа ВШЭ запустило подкаст о профессиях будущего «Кем стать, когда вывезу»
IQ Media — бренд-медиа Высшей школы экономики — запускает новый проект «Кем стать, когда вывезу», посвященный профессиям будущего. В девяти выпусках подкаста эксперты ВШЭ из разных сфер — маркетологи, специалисты по будущему, инженеры, эксперты по кибербезопасности, юристы, биоинформатики — рассказывают о том, чему и где научиться уже сейчас, чтобы быть востребованным в будущем.
«Вышка школьникам»: как прошел осенний фестиваль образовательных проектов
14 сентября состоялось одно из самых масштабных университетских событий осени — фестиваль «Вышка школьникам». Чтобы показать все многообразие своих активностей, Высшая школа экономики второй год проводит такое масштабное и яркое мероприятие для учащихся разных классов и их родителей. Фестиваль набирает популярность: число посетителей в этот раз на 1000 больше, чем в прошлом году, — более 8000 участников зарегистрировались, чтобы провести день с пользой на Покровском бульваре, 11.
Ученые выяснили, что мозг реагирует на чужие действия, как на свои
Когда мы наблюдаем, как кто-то двигает пальцем, наш мозг не остается в стороне. Работа ученых из НИУ ВШЭ и Лозаннского университетского госпиталя показала, что наблюдение за движением активирует моторную кору так, словно мы сами совершаем это действие, и при этом заглушает ненужные мышцы. Результаты опубликованы в журнале Scientific Reports.
IQ Media и другие проекты Вышки — в шорт-листе премии PROBA Awards
Сразу несколько проектов Высшей школы экономики вошли в шорт-лист международной премии в области коммуникаций PROBA Awards. Среди них бренд-медиа НИУ ВШЭ IQMedia (номинация «Бренд-медиа»). Первое полноформатное университетское медиа для внешней аудитории было запущено в 2024 году командой Дирекции по маркетинговым коммуникациям университета.