Методы и средства моделирования распределенных систем хранения и обработки данных на основе результатов их мониторинга

Europe/Moscow
Description

Среда, 16 декабря 2020 г. в 11.00
Онлайн семинар Webex

Нечаевский Андрей Васильевич

(по материалам кандидатской диссертации)

Современные системы хранения и обработки данных – это сложные распределенные программно-аппаратные комплексы, построенные с применением грид и облачных технологий. Имитационное моделирование позволяет обнаружить узкие места в архитектуре центров обработки данных, проводить эксперименты с изменением топологии и заменой вычислительных и сетевых ресурсов для проверки предлагаемых системных решений без непосредственного вмешательства в функционирование работающих объектов, тестировать алгоритмы управления задачами и распределения ресурсов по группам пользователей. В настоящее время процессы моделирования и мониторинга рассматриваются, как независимые задачи, не связанные между собой. Чтобы повысить точность получаемых результатов, необходимо в качестве входных данных для моделирования использовать статистику, накопленную за время работы с помощью систем мониторинга. Для этого требуется разработка программных средств, объединяющих процессы моделирования и мониторинга. Представленный программный комплекс для моделирования систем хранения и обработки данных SyMSim, реализует синтез процессов моделирования и мониторинга, позволяет провести предварительные исследования различных вариантов организации IT-инфраструктуры, оценить возможности существующей архитектуры при решении задач хранения и обработки данных и дать рекомендации по ее оптимизации.  SyMSim был использован для моделирования вычислительных центров экспериментов BM@N и MPD ускорительного комплекса NICA, моделирования MPI вычислений, а также моделирования вычислительного центра ИФВЭ в Пекине.


Methods and tools for distributed data storage and processing systems simulation based on the monitoring results

Modern data storage and processing systems are complex distributed software and hardware infrastructures developed with grid and cloud technologies. Simulation modeling allows to detect bottlenecks in the architecture of data centers, experiment with changing the topology and replacing computing and network resources to test the proposed system solutions without directly interfering with the functioning of working objects, test algorithms for task management and resource distribution among user groups. Simulation and monitoring processes are considered at present, as independent tasks that are not related to each other. To improve the accuracy of the simulation results it is necessary to use statistics accumulated at the monitoring systems data bases. This requires the development of software tools that combine simulation and monitoring processes. The presented software package SyMSim implements the synthesis of simulation and monitoring processes. It is allow one to conduct preliminary studies of various options for organizing IT infrastructure, evaluate the capabilities of the existing architecture in solving data storage and processing problems, and make recommendations for its optimization. SyMSim was used for simulating computer centers for BM@N and MPD experiments  of the NICA accelerator complex, MPI calculations, and IHEP computing center in Beijing.


Подключение к семинару:

Название: Методы и средства моделирования распределенных систем хранения и обработки данных на основе результатов их мониторинга (по материалам кандидатской)

Местоhttps://jinr.webex.com/webappng/sites/jinr/meeting/download/1469308738b644c3a4ec5fe2c88beee4?siteurl=jinr&MTID=m6db786c7ededa3e74efda5410f6af3ac
Когда: 16 декабря 2020 г. 11:00 – 13:00

Номер совещания (код доступа): 174 966 0827
Пароль совещания: CMj23ET4723

Присоединиться по телефону
Только передача голоса по IP
 
Присоединение с помощью видеосистемы или приложения
Наберите 1749660827@jinr.webex.com
Также можно набрать 62.109.219.4 и ввести номер совещания.
 
Присоединиться с использованием Microsoft Lync или Microsoft Skype для бизнеса
Наберите 1749660827.jinr@lync.webex.com

The agenda of this meeting is empty