У меня есть кластер AWS EMR, который используется исключительно для выполнения запросов Spark SQL...

Только что начал изучать Druid, мы не найдем ни одного блога по ссылке для установки Druid на AWS....

Когда я загружаю данные в фрейм данных pyspark из корзины s3, затем выполняю некоторые манипуляции...

Я строю кластер EMR в Terraform и в аргументе STEP я хочу загрузить файл JSON, который описывает...

Можно ли каким-либо образом отправлять задания / этапы preto в кластер EMR так же, как вы можете...

Если вы будете следовать https://docs.aws.amazon

Я создал кластер EMR (5.23.0) с JupyterHub. Я создаю туннель SSH до 9443 на мастер-узел. Однако я...

Я пишу большой набор данных в формате Parquet в HDFS с использованием Spark, и в EMR он работает...

Мы выполняем ежедневные задания ноутбуков Zeppelin в Amazon EMR. Записные книжки Zeppelin...

У меня есть записная книжка EMR scala, я хотел бы установить библиотеку для отображения данных...

Я пытаюсь построить набор искровых данных с помощью matplotlib после преобразования его в pandas...

Я пытаюсь сохранить набор данных, используя partitionBy на S3, используя pyspark.Я делю на столбец...

Я хочу установить дополнительные библиотеки в моем jupyterhub для ядра Python3.Я использую версию...

Я хочу установить определенные библиотеки на основных узлах уже работающего кластера.Следуя...

При записи в DynamodB с емкостью по требованию с использованием куста > INSERT OVERWRITE TABLE t...

Я работаю с временными рядами для прогноза фондового рынка. Мой скрипт Spark отлично работает на...

Я пытаюсь запустить код для загрузки данных из моей таблицы HBase в Spark RDD. Однако, когда я...

В настоящее время у нас огромное количество данных в старых разделах таблиц EMRFS. Я планировал...

Я пытаюсь использовать пакет graphframes в pyspark в Jupyter Notebook (используя Sagemaker и...

Я не могу отправить работу Spark через spark-submit в EMR. Моя искра-отправка выглядит так - sudo...

У меня есть написанный код на Spark Scala для модели RandomForest. Мои данные имеют 200 миллионов...

У меня есть файлы JSON в корзине S3.Структура файла будет такой:...

Я пытаюсь интегрировать DynamoDB в EMR spark, используя решение, представленное в блоге AWS....

Я новичок в EMR & Spark. Я написал простую программу работы с искрой в java и создал толстую банку....

Я запускаю кластер на EMR и отправляю некоторые шаги на нем с использованием воздушного потока. Что...