Мой файл flume.log становился огромным, поэтому я по глупости удалил его.Его абсолютный путь был
/etc/apache-flume-1.8.0-bin/logs/flume.log
Затем я воссоздал его (т.е. touch flume.log) в том же каталоге.Однако после запуска программы Pyspark к нему больше ничего не добавляется.Он принадлежит root, и я запускаю код pyspark от имени root.
Я также проверил /etc/apache-flume-1.8.0-bin/conf/log4j.properties и убедился, что путь указан правильно (чтоэто).Я также попытался изменить путь к каталогу моего проекта безрезультатно.
Я попытался удалить файл (чтобы узнать, будет ли он создан автоматически), и я сначала попытался создать пустой файл.Все еще нет журналов ошибок.
Есть ли способ исправить это?
Я нахожусь на Ubuntu 18.04, Apache Flume 1.8.0, Pyspark 2.2.2