Добрый день!
Дублирую проблему, описанную в заявке № 10609.
Столкнулись с проблемой низкой производительности подытогов на Сводном отчёте на таблице Clickhouse с проекциями. Таблица в Clickhouse содержит около 5 миллиардов строк, куб на таблице содержит около 30 размерностей и одно поле с измерением (сумма). Таблица в Clickhouse содержит несколько проекций с большей частью размерностей куба. Сводный отчёт с выводом размерностей, присутствующих в проекциях таблицы, формируется достаточно быстро - за секунды. Однако, если при этом выбрать в настройках сводного отчёта отображение подытогов, то запрос к БД крутится более 30 секунд и отваливается по таймауту. Провели анализ, с активными подытогами luxms генерит запрос вида:
SELECT …
GROUP BY GROUPING SETS ((dimension1, dimension2, dimension3, dimension4, dimension5)
,(dimension1),
(dimension1,dimension2),
(dimension1,dimension2,dimension5),
(dimension1,dimension2,dimension5,dimension4)
))
Clickhouse при использовании GROUPING SETS с проекциями работать не может (Disable projection when grouping set is used. by amosbird · Pull Request #40726 · ClickHouse/ClickHouse · GitHub), поэтому запрос крутится долго по самой таблице вместо проекций.
В то же время если в DBeaver выполнить тот же запрос, но заменить группировку на WITH ROLLUP:
SELECT …
GROUP BY (dimension1, dimension2, dimension5, dimension3)
WITH ROLLUP
то такой запрос работает оптимально, с проекциями, и даёт результат, идентичный запросу, который генерит luxms.
Возможно ли оптимизировать генерацию запроса с подытогами из luxms в Clickhouse, используя GROUP BY … WITH ROLLUP вместо GROUP BY GROUPING SETS?