|
ИСТИНА |
Войти в систему Регистрация |
ИСТИНА ИНХС РАН |
||
Разработка и исследование параллельных методов кластеризации большого количества текстовых сообщений с использованием алгоритма DBSCANдипломная работа (Бакалавр)
- Научный руководитель: Жуков Константин Андреевич
- Автор: Жердев И.П.
- Тип: Бакалавр
- Организация, в которой проходила защита: МГУ имени М.В. Ломоносова
- Год защиты: 2022
- Аннотация: В данной работе рассмотрена задача кластеризации, возникающая в ходе анализа большого количества текстовых сообщений. Проанализированы существующие инструменты, отдельно рассмотрен программный комплекс ClusterLogs. Для задачи кластеризации представлено сравнение ряда существующих алгоритмов решения, из которых выделен алгоритм DBSCAN, основанный на плотности. Описаны параллельные версии этого алгоритма для вычислительных систем с общей и распределенной памятью, проведено исследование и сравнение существующих параллельных реализаций. В результате исследования предложена модификация одной из версий алгоритма для распределенной памяти (PDSDBSCAN-D), которая позволяет получить более равномерное распределение нагрузки по параллельным процессам. Данная модифицированная версия внедрена в программный комплекс ClusterLogs. Вычислительные эксперименты на высокопроизводительном кластере IBM Polus показали эффективность предложенной параллельной реализации.
- Добавил в систему: Жуков Константин Андреевич