0

Есть таблица table с полями groupField и count.

groupField - integer, принимает одно из N значений (N порядка единиц)

count - integer, положительное.

Таблица проиндексирована по groupField.

Количество записей в таблице - порядка десятка миллионов, записи распределены равномерно по groupField.

Нужно мне получить результат следующего запроса:

SELECT groupField FROM table GROUP BY groupField HAVING SUM(count) > :X

, где Х - параметр - число порядка единицы.

Очевидно, что postgres будет выполнять seq scan. Но, так как числа в колонке count положительные, то можно получить тот же результат, просмотрев примерно N*X строк, т.е. примерно в 100000 раз быстрее. Для этого нужно по каждому значению groupField смотреть не более X строк.

Вопрос: как вежливо попросить postgres (9.6) это сделать?

ЗЫ: Есть вариант решения с хардкодом значений groupField, благо их немного:

SELECT
  groupField,
  SUM(count) > X
FROM
  table
WHERE
  groupField = :groupFieldValue
LIMIT 7

Такие запросы можно написать для каждого значения groupField и затем заджойнить. Но такой хардкод делать по понятным причинам не очень хочется.

ЗЫЫ: таблица table получена с помощью WITH-а из реальной таблицы путем применения множества фильтров. Вариантов набора фильтров очень-очень много, набор фильтров примерно уникален для каждого запроса, соответственно, предрасчитать значения в table, и тем более значение результата, не представляется возможным.

1 ответ 1

0

Может в момент получения таблицы через WITH добавить столбец с row_number?

SELECT groupField FROM (
    SELECT row_number() OVER (PARTITION BY groupField) AS rn, * FROM original_table
) x WHERE rn <= 7 
GROUP BY groupField HAVING SUM(count) > :X 
2
  • Проверил. Не помогает. После получения таблицы Для применения условия 'WHERE rn <= :X' postgres сканирует весь получившийся результат подзапроса (по факту это моя же таблица table, только с добавленной колонкой rn). На всякий случай добавил в подзапрос ORDER BY rn, но это тоже не помогло. Commented 27 сент. 2017 в 8:22
  • Попробуй творчески переработать: charlesnagy.info/it/postgresql/…
    – ffk
    Commented 27 сент. 2017 в 13:48

Ваш ответ

Нажимая «Отправить ответ», вы соглашаетесь с условиями пользования и подтверждаете, что прочитали политику конфиденциальности.

Всё ещё ищете ответ? Посмотрите другие вопросы с метками или задайте свой вопрос.