Научный журнал

ISSN 1814-2400

ИНФОРМАТИКА И СИСТЕМЫ УПРАВЛЕНИЯ

Григорьев Ю. А., Ермаков Е. Ю., Пролетарская В. А.

ЭКСПЕРИМЕНТАЛЬНАЯ ПРОВЕРКА ЭФФЕКТИВНОСТИ МЕТОДА ДОСТУПА К ХРАНИЛИЩУ ДАННЫХ НА ПЛАТФОРМЕ SPARK С КАСКАДНЫМ ИСПОЛЬЗОВАНИЕМ ФИЛЬТРА БЛУМА

На примере SQL-запроса Q3 теста TPC-H выполнено сравнение двух методов доступа к хранилищу данных: разработанного метода с каскадным использованием фильтра Блума (КИФБ) и без использования фильтра Блума (БИФБ). С этой целью проведены натурные эксперименты в среде кластера из 8 узлов на платформе параллельных вычислений Apache Spark. Результаты экспериментов подтвердили преимущества разработанного метода КИФБ.

Ключевые слова: Spark SQL, фильтр Блума, TPC-H, запрос Q3, сравнение ме¬тодов