Heelo Community Я работаю в проекте с большими данными, и у меня есть следующий вопрос:
Я хочу использовать oozie для запуска hql-файлов, чтобы создавать таблицы и загружать в них данные, в настоящее время я нахожусьиспользуя кластер hortonworks xith 6 узлов, мой вопрос заключается в следующем: нужно ли мне хранить файлы HQL, которые имеют очень маленький размер, в формате hdf или я могу использовать локальную файловую систему кластера.Во втором случае oozie сможет работать с этими файлами, если они находятся в локальной файловой системе.В настоящее время я убежден, что мы должны избегать хранения небольших файлов в HDFS в максимально возможной степени.Большое спасибо за ваши ответы