У меня есть некоторые данные в s3, которые я хочу использовать AWS Glue для сканирования и...
У меня есть скрипт pyspark, который я могу запустить в AWS GLUE. Но каждый раз, когда я создаю...
Я пытаюсь настроить озеро данных. Мы поместили несколько CSV в S3 в формате (упрощенном для...
Я создал собственный классификатор, но не могу выяснить, как применить его к любому из моих...
при преобразовании из csv в паркет с использованием задания ETL для склеивания AWS после...
Я ужасно незнаком с искрой, но я почти уверен, что существует хороший способ сделать то, что я хочу...
Я пытаюсь использовать AWS Glue для ETL базы данных MySQL от RDS до S3, чтобы я мог работать с...
У меня кластер AWS EMR (v5.11.1) с Spark (v2.2.1), и я пытаюсь использовать каталог данных клея AWS...
Какой будет правильный набор инструментов и шагов для импорта ZIP-файла CSV с веб-сайта на...
У меня есть файлы JSON в корзине S3, которая следует этой схеме: { "object1" : {...},...
Я хочу прочитать отфильтрованные данные из экземпляра Mysql, используя задание AWS glue. Так как...
Я использую консоль клея, а не конечную точку разработчика. Клеевая работа может получить доступ к...
У меня есть большой вложенный документ json для каждого года (например, 2018, 2017), в котором...
У меня есть данные в моем кластере красных смещений. Каков наилучший способ ежедневно извлекать...
Можно ли создать классификатор Грока для файлов паркета?Если да, где я могу найти примеры? Я...
введите описание изображения здесь Я могу подключиться к MYSQL во время выполнения моего кода...
Я столкнулся со странным поведением импорта данных в Redshift из Postgres с помощью AWS Glue.У меня...
Я разрабатываю приложение, которое должно читать текстовый файл из S3 каждые 15 минут,...
Я пытаюсь сгенерировать уникальные идентификаторы для моего фрейма данных в разделах AWS s3,...
Я создал сканер клея, который сканирует данные и создает таблицу в каталоге данных клея.Предположим...
Для контекста: я просмотрел этот предыдущий вопрос , но был недоволен ответом по двум причинам: Я...
Я создал корзину s3 и загрузил JSON-файл для пользователя AWS IAM и файла разрешений.Теперь я хочу...
Я вижу очень странное поведение оператора AWS Glue Map.Во-первых, похоже, что вы должны вернуть...
извинения, если на этот вопрос ответили в другом месте (но я не думаю, что это так).Я пытаюсь...
У меня есть таблица, созданная сканером, указывающая на некоторые файлы паркета, хранящиеся в s3.В...