У меня есть набор файлов в HDFS, эти файлы твиты. Мне нужно транслировать эти твиты через...
Я пытаюсь сделать MapReduce на моем компьютере с Windows с помощью Python.Я застрял в...
У меня есть требование, когда я хочу переместить файл из HDFS, который не был изменен за последние...
Hive не распознает мой оператор WITH внутри команды INSERT.Как я могу понять куст? Я создал внешние...
Моя искровая работа: def saveCount(spark: SparkSession, cnt: Long): Unit = { val fs = FileSystem
У меня есть следующая конфигурация для моего приемника HDFS Flume из локального файла в HDFS. Когда...
У меня большой (> 500 м ряд) файл CSV.Каждая строка в этом CSV-файле содержит путь к двоичному...
Я настроил HDFS Kafka Connect для работы на Azure Datalake, однако я только что заметил, что ключи...
Как войти в HDFS, используя стандартную библиотеку журналов. В частности, я использую...
Я новичок в улье / hadoop.Я читал / смотрел документацию, видео о том, как hive, hdfs, hadoop...
Я пытаюсь прочитать файл паркета из удаленной файловой системы HDFS, используя Java. Для этого я...
Я хочу написать сценарий оболочки, который будет перебирать все файлы в каталоге HDFS и получать...
Я пытался добавить несколько строк (5 миллионов строк / 2800 столбцов) в таблицу Hive через Spark /...
Можно ли запустить двоичный исполняемый файл в HDFS?Я должен обработать некоторые файлы на HDFS.До...
Я учусь запускать кластер hadoop с помощью Docker.Я запускаю 3 узла (mater, slave1, slave2) на...
Я использую коммиттер S3A (промежуточный коммиттер каталогов) со своим хранилищем объектов (не AWS)...
Я пишу программу Scala для загрузки файлов в openstack swift: hdfs://xxxx/user/me/2018_07_01/count
Я читал в Интернете, что для нас было бы лучше объединить все маленькие файлы в большой файл при...
Попытка выделить более одной группы в качестве группы SuperUser для HDFS от Cloudera Superuser...
В Китае chain table (拉链 表) - один из способов хранения данных в хранилище данных (HDFS). Другие...
Я пытаюсь загрузить файл csv в таблицу hbase с помощью команды оболочки Dimporttsv. Файлы csv...
Я вполне понимаю каждого. Но каковы основные различия? Сохраняются ли данные на диске? Что, если я...
Я пытаюсь объединить большое количество маленьких файлов avro (в формате hdf) в файл паркета....
Я пытаюсь раскрутить простой кластер HDFS на одном хосте.Когда я запускаю сценарий start-dfs.sh для...
Я могу успешно проверить приведенный ниже код в кластере EMR с помощью искры. Но я не могу написать...