У нас есть задания ETL, то есть java jar (выполняет операции etl) запускается через скрипт оболочки
Я создал таблицу в aws glue с помощью сканера, затем добавил раздел в s3 с другой схемой и снова...
Кажется, что это должно быть легко, как будто это основной вариант использования этого набора...
Цель У меня есть папка S3, заполненная файлами json с различными схемами, включая массивы...
У меня есть CSV-файл, который часто обновляется.Я должен переместить данные из этого CSV-файла в...
У нас есть сценарий Python для нашей склеенной работы, и запускаемые три раза в час для...
Я использую AWS Glue, где хочу выгружать записи из таблицы Oracle (в которой 80 миллионов строк) в...
Я новичок AWS Glue, который пытается прочитать некоторые объекты паркета, которые есть у меня в S3,...
Получил 11 миллионов + json файлов в S3. Попытался сканировать и каталогизировать их в AWS Glue....
Я покрыл всю необходимую информацию, пока я использую клей, пожалуйста, дайте мне знать, если вам...
Я успешно использовал AS Glue для сканирования нескольких файлов JSON, и результат (почти), как я и...
Я создал внешнюю схему для своей базы данных в aws glue.Я вижу список таблиц, но не могу посмотреть...
Я хотел бы знать, возможно ли добавить столбец отметки времени в таблицу, когда он загружается с...
Я использую AWS Glue и у меня есть сканер для отображения таблиц из определенной схемы в моем...
У меня есть корзина S3, которая постоянно заполняется новыми данными, я использую Athena и Glue для...
Я пытаюсь использовать библиотеку https://github.com/snowplow/scala-maxmind-iplookups в работе AWS...
Итак, мы начинаем изучать сервис AWS Glue как сервис ETL.Самый большой нерешенный вопрос в нашей...
У меня есть задание AWS Glue, которое читает из источника данных примерно так: datasource0 =...
Я прочитал эту статью об амазоне о выравнивании файла json и загрузке в красное смещение....
Я использую метод map DynamicFrame (или, что эквивалентно, метод Map.apply).Я заметил, что любые...
Я пытаюсь развернуть массивы JSON массивов в AWS Glue с Python Пример структуры данных выглядит...
Я настроил Python для выполнения ETL-программирования с использованием конечной точки разработчика...
Попытка преобразовать серию сжатых gz в формат паркета. В процессах пытаются сделать какие-то...
Можно ли загрузить несколько таблиц в Redshift с помощью задания AWS Glue? Это шаги, которые я...
Я работал над учебными пособиями по склеиванию AWS (https://docs.aws.amazon