Я храню данные временных рядов в таблицах DynamoDB, которые генерируются ежедневно ( Пример )....
Я создал Glue Crawler для чтения файлов из S3 и создания таблицы для каждого пути S3. Таблица...
У меня есть проект установки, как описано здесь . Но код: import com.amazonaws.services.glue
Я пытаюсь добавить обработку ошибок в мой код. Я запускаю pyspark-код внутри aws-склеивания. Я...
Я пишу скрипт на python, который должен прочитать метаданные (только схему), представленные в...
Я выполняю задание etl, пытаюсь преобразовать данные объемом около 40 ГБ и сохранить их в корзину...
Я использую Firehose и Glue для загрузки данных и преобразования JSON в файл паркета в S3. Мне...
Я новичок в сервисах AWS и glue, пытаюсь работать с pycharm, и у меня есть класс python, который...
1.read table A from SRC 2.perform CDC & write A to TGT 3.read table B from SRC 4.read table A...
У меня есть столбец с именем uf, который содержит массив объектов JSON. Вот макет: [...
Я пытаюсь запустить glueCrawler из lamda, но получаю 2019-11-07 13:23:12 [main] ERROR com.zuzu
Я создал каталог данных в клей на основе базы данных RDS. Затем я создал задание по преобразованию...
Я пытаюсь создать задание на клей. Я использую boto3. Я использую скрипт ниже. Я хочу создать его...
Я новичок в использовании boto3, и я хотел бы сжать файл, который находится в ведре s3, не загружая...
Я работаю с клеем в aws. Он в основном запускает код pyspark внутри клея aws. Работа выполняет...
Я недавно начал использовать AWS Glue для чтения некоторых файлов на S3. После того, как я потратил...
Я хочу определить таблицу Redshift вручную перед моей первой записью. Это потому, что я хочу...
В AWS Glue для простой работы с пандами: чтение данных в XLSX и запись в CSV. У меня есть небольшой...
Я настроил AWS Glue для вывода журналов событий Spark, чтобы их можно было импортировать в Spark...
Я создал конечную точку разработчика клея, но понятия не имею, как прикрепить к ней записную книжку...
Я сгенерировал ключ ssh через веб-консоль amazon. Но как использовать его для создания конечной...
Я пришел к вам, чтобы узнать, есть ли у вас профессиональные советы для загрузки последних...
Я создал сканер aws, который использует классификатор для импорта CSV-файлов в таблицу данных. Что...
У меня есть задание AWS Glue Python, которое загружает данные из MySQL в файлы S3 после того, как...
У меня есть задания Spark, работающие в кластере EMR. EMR использует AWS Glue в качестве метастафа...