7. AWS Glue Batch — выполнение кода PySpark в AWS Glue скачать в хорошем качестве

7. AWS Glue Batch — выполнение кода PySpark в AWS Glue

Data Engineering! Это важное слово в современном мире технологий. Каждая организация ищет инженеров данных, и, согласно анализу, это одна из профессий, которую не коснётся волна искусственного интеллекта. Это также одна из самых высокооплачиваемых профессий в мире технологий. Существует множество технологий, фреймворков и инструментов, которые облегчают работу со стеком Data Engineering. Spark, Kafka, Lakehouse, Data Warehouse и т. д. — вот лишь некоторые из них. Все поставщики облачных услуг имеют в запасе полный набор инструментов для работы с данными. AWS, Azure и GCP предоставляют различные платформы для работы со стеком данных. Один из интересных стеков — Serverless, термин, введенный AWS с запуском AWS Lambda. Этот курс посвящен бессерверной обработке данных, которая за последние годы приобрела большую популярность. AWS — главный претендент на бессерверную обработку данных, которая включает пакетную и потоковую обработку. Этот курс включает в себя следующие темы: Бессерверная пакетная обработка. Часть 1 — AWS Glue Потоковая обработка данных — Kinesis Data Streams, Kinesis Firehose Бессерверная потоковая обработка. Часть 1 — AWS Glue и Kinesis Бессерверная пакетная обработка. Часть 2 — AWS Lambda Бессерверная потоковая обработка. Часть 2 — Lambda и Kinesis В конце курса вам будет предложено реализовать 3 проекта. Предварительные требования: ознакомьтесь с ними БЕСПЛАТНО на сайте www.3aayaam.in (обратите внимание на пробел между ними).