У меня работает искра кластера AWS EMR, и я хотел бы отправить ему задание PySpark со своего...
Я запускаю pyspark в AWS EMR начиная с EMR 5.3 и никогда не сталкивался с этой проблемой до тех пор...
пытаюсь выполнить предварительные запросы от presto-cli, и я получаю следующую ошибку...
Мы переходим к AWS EMR / S3 и используем R для анализа (sparklyr библиотека).У нас есть данные о...
Я пытаюсь построить кластер EMR через terraform.Но я получаю следующую ошибку при применении кода
Я пытаюсь подключиться к экземпляру MySQL из ноутбука AWS EMR - Zeppelin.Загружен разъем mysql в...
У меня есть искровое задание, которое я полностью сократил до: spark.read
Вот шаг EMR, который я использовал, s3-dist-cp --targetSize 1000 --outputCodec = gz --s3Endpoint =...
Создал кластер (Spark Amazon EMR) и попытался запустить его в командной строке. CLI: hadoop distcp...
У меня проблемы с доступом к S3 из задания Flink. Если я отправляю собранную банку для своей работы...
Я использую кластер Spark в конфигурации 1 MasterNode, 3 WorkerNode с использованием aws emr и...
Почему список для EC2 отличается от списка EMR? EC2: https://aws.amazon.com/ec2/spot/pricing/ EMR:...
У меня есть стол оракула, имеющий около 30 столов.Я хочу сбросить данные из этих таблиц за...
Я создал кластер EMS AWS с помощью обычного мастера кластеров EMR на консоли управления AWS, и мне...
Я немного запутался в том, как настроить конфигурацию Spark для рабочих нагрузок, используя YARN в...
Когда я создаю AWS EMR , я могу сделать это с помощью их простого мастера на AWS Management Console...
Я разработал свое приложение, используя Spark + Hbase и Phoenix.Я хочу оптимизировать операционные...
Я пытаюсь достичь 80% усеченного значения для каждой группы в скале, чтобы избавиться от выбросов....
Я новичок, чтобы моргнуть и пытаюсь развернуть мой jar на кластере EMR.Я использовал 3 узла...
Я новичок и пытаюсь развернуть это на кластере EMR. Я использовал 3 узла кластера (1 ведущий и 2...
Динамическое разбиение, введенное в Spark 2.3, похоже, не работает на AWS EMR 5.13.0 при записи в...
Я пытаюсь создать кластер EMR с указанными ниже конфигурациями, но на этапе начальной загрузки...
Есть ли способ подключения к таблице Hive в кластере AWS EMR через Python? Я пробовал несколько...
Я пытаюсь запустить параллельные потоки в задании на искру. Это работает без проблем, когда я...
Можно ли одновременно отправлять и запускать задания Spark в одном кластере AWS EMR? Если да, то не...