У меня есть кластер EMR, когда я запускаю Sqoop с одним маппером для передачи запроса 7 миллионов записей в виде файлов Avro на S3. Через 30 минут (+ - 5 минут) задача карты иногда убивается, а иногда просто остается в рабочем состоянии (никогда не заканчивается), но создается другое задание карты, которое переходит в состояние выполнения, как замена предыдущей, и задание никогда не выполняется. концы. Если я изменю запрос, чтобы вернуть около 1 миллиона записей, работа заканчивается нормальноПросматривая логи, я нашел только это
2019-10-31 10:20:29,991 INFO [RMCommunicator Allocator] org.apache.hadoop.mapreduce.v2.app.rm.RMContainerAllocator: Killing taskAttempt:attempt_1572476771816_0004_m_000000_4004 because it is running on unusable node:ip-10-0-2-41.us-east-2.compute.internal:8041
Может кто-нибудь дать решение для этого?