Shchapov V.   Масич А.Г.   Masich G.F.  

Экспериментальная оценка эффективности модели очередей и алгоритмов параллельной передачи в задачах обработки интенсивных потоков данных в распределенных системах

Reporter: Shchapov V.

В работе рассмотрена разработанная модель очередей, используемая для параллельной передачи данных по скоростной протяженной линии связи. Приведен алгоритм распределения параллельных потоков данных от источника по вычислительным узлам удаленной суперЭВМ и его зависимость от стратегий управления перегрузками в транспортных протоколах. Описана реализация модели в виде специализированного комплекса программного обеспечения, устанавливаемого во взаимодействующих оконечных системах и включающего протокол обмена сообщениями между прикладными процессами вычислительных узлов суперЭВМ и источником интенсивного потока данных. Показана возможность динамической адаптации числа вычислительных узлов к скорости входного потока и времени его обработки прикладными программами, в том числе на нескольких суперкомпьютерах.

Приводятся результаты измерений и эмпирической оценки эффективности модели очередей и алгоритмов управления ими при передаче интенсивного потока данных по высокоскоростной оптической магистрали Пермь-Екатеринбург. Показана область применения, и эффективность разработанных решений для обработки потока экспериментальных данных на суперЭВМ в реальном времени.