У нас есть стандартный ежедневный рабочий процесс приема пищи на Cloudera. Я ищу способ воспроизвести некоторые родные AWS поведения, когда запускается искра при создании файла с использованием ooz ie. Я нашел входные события, где вы можете указать условие, которое проверяет, существует ли данный файл. Это будет работать нормально, если нет необходимости снова запускать мой рабочий процесс в течение того же дня (например, ежедневные входные данные были повреждены и создаются снова, мой рабочий процесс приема должен быть выполнен снова). Есть ли способ решить это? Другой вариант, который мы рассмотрим, это просто запустить рабочий процесс, просто используя API, который звучит как более чистое решение.