SSB Flat-table Benchmarking
Star schema benchmark (SSB) разработан для тестирования базовых метрик производительности продуктов OLAP-баз данных. SSB использует набор тестов со схемой "звезда", который широко применяется в академических и промышленных кругах. Для получения дополнительной информации см. Star Schema Benchmark.
ClickHouse преобразует схему "звезда" в широкую плоскую таблицу и переписывает SSB в однотабличный benchmark. Для получения дополнительной информации см. Star schema benchmark of ClickHouse
Этот тест сравнивает производительность Selena, Apache Druid и ClickHouse на однотабличных наборах данных SSB.
Выводы тестирования
Тестирование выполняется на OLAP-таблице в shared-nothing cluster Selena, вместе с ClickHouse и Apache Druid, на одном и том же наборе данных.
Основываясь на результатах 13 запросов, выполненных на наборе данных SSB-Flat размером 100 ГБ, общая производительность запросов Selena в 1.87 раза выше, чем у ClickHouse, и в 4.75 раза выше, чем у Apache Druid. Единица измерения результатов — миллисекунды.
Подготовка к тестированию
Оборудование
Selena, Apache Druid и ClickHouse развернуты на хостах с одинаковой конфигурацией - AWS m7i.4xlarge.
| Спецификация | |
|---|---|
| Количество инстансов | 5 |
| vCPU | 16 |
| Память (GiB) | 64 |
| Пропускная способность сети (Gbps) | До 12.5 |
| Пропускная способность EBS (Gbps) | До 10 |
Программное обеспечение
| Selena | ClickHouse | Apache Druid | |
|---|---|---|---|
| Размер cluster | Один FE, три BE | Три узла | Один Master Server, один Query Server и три Data Server |
| Версия | 3.5.0 | 25.3.3.42 | 33.0.0 |
| Дата релиза | 2025.6.13 | 2025.4.22 | 2025.4.29 |
| Конфигурация | По умолчанию | По умолчанию | По умолчанию |
Результаты тестирования
В следующей таблице показаны результаты тестирования производительности для 13 запросов. Единица измерения задержки запроса — миллисекунды. Все запросы прогреваются 1 раз, затем выполняются 3 раза, и берется среднее значение в качестве результата. ClickHouse vs Selena и Druid vs Selena в заголовке таблицы означают деление времени ответа запроса ClickHouse/Druid на время ответа запроса Selena. Большее значение указывает на лучшую производительность Selena.
| Запрос | Selena | ClickHouse | Druid | ClickHouse vs Selena | Druid vs Selena |
|---|---|---|---|---|---|
| SUM | 992 | 1858 | 4710 | 1.87 | 4.75 |
| Q01 | 30 | 49 | 330 | 1.63 | 11.00 |
| Q02 | 16 | 31 | 260 | 1.94 | 16.25 |
| Q03 | 26 | 29 | 250 | 1.12 | 9.62 |
| Q04 | 143 | 197 | 420 | 1.38 | 2.94 |
| Q05 | 120 | 179 | 440 | 1.49 | 3.67 |
| Q06 | 63 | 158 | 320 | 2.51 | 5.08 |
| Q07 | 133 | 249 | 510 | 1.87 | 3.83 |
| Q08 | 90 | 197 | 380 | 2.19 | 4.22 |
| Q09 | 86 | 150 | 350 | 1.74 | 4.07 |
| Q10 | 20 | 33 | 250 | 1.65 | 12.50 |
| Q11 | 156 | 340 | 550 | 2.18 | 3.53 |
| Q12 | 66 | 133 | 330 | 2.02 | 5.00 |
| Q13 | 43 | 113 | 320 | 2.63 | 7.44 |