Предположим, что вы разрабатываете новый компонент обработки Hadoop (аналог MapReduce). Вам нужно решить, где хранить промежуточные файлы, которые создаются при выполнении программ. Вы решаете запустить несколько тестов, чтобы получить оценку объема этих промежуточных файлов. Вы получаете следующие результаты:
Контрольный пример 1. Входные данные: 100 ГБ Промежуточные файлы: 1 ТБ Выходные данные: 1 ГБ
Контрольный пример 2. Входные данные: 50 ГБ Промежуточные файлы: 400 ГБ Выходные данные: 0,8 ГБ
Контрольный пример 3. Входные данные: 80 ГБ Промежуточные файлы: 1,2 ТБ Выходные данные: 0,9 ГБ
Локальная файловая система узла данных HDFS Локальная файловая система узла имен