Практическая лаборатория AWS Glue: преобразование CSV в Parquet с помощью задания ETL | Разработк... скачать в хорошем качестве

Практическая лаборатория AWS Glue: преобразование CSV в Parquet с помощью задания ETL | Разработк...

GitHub: https://github.com/knodax-labs-demo/a... Выбор и внедрение решения для обработки данных В этой пошаговой практической лабораторной работе вы научитесь создавать конвейер пакетной обработки данных с помощью AWS Glue — ключевого навыка в рабочих процессах инженерии данных и машинного обучения. Мы рассмотрим весь процесс преобразования набора данных CSV в формат Parquet с помощью AWS Glue, от загрузки данных в Amazon S3 до их каталогизации с помощью поискового робота и запуска задания ETL. ✅ Что вы узнаете: Как загрузить образцы данных в Amazon S3 Создание базы данных Glue и поискового робота для каталогизации данных Создание и запуск задания Glue ETL для преобразования CSV в Parquet Проверка выходных данных и понимание их роли в конвейерах машинного обучения Учет затрат и советы по очистке 💡 Почему это важно: Пакетная обработка — основополагающая концепция в области инжиниринга данных и машинного обучения. Освоение AWS Glue позволяет создавать масштабируемые бессерверные рабочие процессы ETL и подготавливать высококачественные данные для аналитики и обучения моделей машинного обучения. ⚠️ Примечание: AWS Glue не входит в уровень бесплатного пользования. Запуск поисковых роботов и заданий ETL может повлечь за собой плату. Вы можете ознакомиться с материалами, посмотрев это видео, не выполняя действия в своей учетной записи AWS. 📚 Идеально подходит для тех, кто готовится к: Сертифицированный инженер данных AWS – младший специалист (DEA-C01) Сертифицированный специалист по машинному обучению AWS – специализация (MLS-C01) Специалисты по инженерии данных и машинному обучению