Ограничение красного смещения для оператора LIKE в инструкции CASE

Question

Я сталкиваюсь с проблемой, когда, если у меня есть более 15 LIKE операторов внутри оператора case, я получаю ошибку java.lang.StackOverflowError.

Вот пример того, что я делаю стаблица с 60 миллионами строк:

SELECT 
  CASE WHEN field LIKE '%value%' THEN 'result'
       WHEN field LIKE '%value2%' THEN 'result2'
       .... 14 more of those
  END

Я не видел ни одного документированного ограничения.Есть идеи как обойти это?

Answer 1

Вы можете Создать пользовательскую функцию Scalar Python для замены LIKE сравнений.

Затем просто используйте:

SELECT f_myfunc(field)

Answer 2

Это оказалось проблемой с драйверами.Первоначально я использовал 1.2.16.1027 и обновился до 1.2.20.1043, и больше не получаю сообщение об ошибке.

Answer 3

Похоже, это ошибка нехватки памяти.

Я думаю, у вас есть несколько вариантов:

• использовать промежуточную таблицу перед выполнением обработки like (илииспользуйте промежуточные таблицы для обработки подмножеств ваших исходных данных)
• увеличьте количество слотов очереди, которые вы используете для этого запроса, чтобы иметь больше доступной памяти https://docs.aws.amazon.com/redshift/latest/dg/r_wlm_query_slot_count.html
• посмотрите навывод explain, чтобы увидеть, дает ли он вам подсказки о том, что идет не так