• ClipSaver
  • dtub.ru
ClipSaver
Русские видео
  • Смешные видео
  • Приколы
  • Обзоры
  • Новости
  • Тесты
  • Спорт
  • Любовь
  • Музыка
  • Разное
Сейчас в тренде
  • Фейгин лайф
  • Три кота
  • Самвел адамян
  • А4 ютуб
  • скачать бит
  • гитара с нуля
Иностранные видео
  • Funny Babies
  • Funny Sports
  • Funny Animals
  • Funny Pranks
  • Funny Magic
  • Funny Vines
  • Funny Virals
  • Funny K-Pop

Migrating Airflow-based Apache Spark jobs to Kubernetes – the Native Way скачать в хорошем качестве

Migrating Airflow-based Apache Spark jobs to Kubernetes – the Native Way 5 лет назад

скачать видео

скачать mp3

скачать mp4

поделиться

телефон с камерой

телефон с видео

бесплатно

загрузить,

Не удается загрузить Youtube-плеер. Проверьте блокировку Youtube в вашей сети.
Повторяем попытку...
Migrating Airflow-based Apache Spark jobs to Kubernetes – the Native Way
  • Поделиться ВК
  • Поделиться в ОК
  •  
  •  


Скачать видео с ютуб по ссылке или смотреть без блокировок на сайте: Migrating Airflow-based Apache Spark jobs to Kubernetes – the Native Way в качестве 4k

У нас вы можете посмотреть бесплатно Migrating Airflow-based Apache Spark jobs to Kubernetes – the Native Way или скачать в максимальном доступном качестве, видео которое было загружено на ютуб. Для загрузки выберите вариант из формы ниже:

  • Информация по загрузке:

Скачать mp3 с ютуба отдельным файлом. Бесплатный рингтон Migrating Airflow-based Apache Spark jobs to Kubernetes – the Native Way в формате MP3:


Если кнопки скачивания не загрузились НАЖМИТЕ ЗДЕСЬ или обновите страницу
Если возникают проблемы со скачиванием видео, пожалуйста напишите в поддержку по адресу внизу страницы.
Спасибо за использование сервиса ClipSaver.ru



Migrating Airflow-based Apache Spark jobs to Kubernetes – the Native Way

At Nielsen Identity, we use Apache Spark to process 10’s of TBs of data, running on AWS EMR. We started at a point where Spark was not even supported out-of-the-box by EMR, and today we’re spinning-up clusters with 1000’s of nodes on a daily basis, orchestrated by Airflow. A few months ago, we embarked on a journey to evaluate the option of using Kubernetes as our Spark infrastructure, mainly to reduce operational costs and improve stability (as we heavily rely on Spot Instances for our clusters). To allow us to achieve those goals, we combined the open-sourced GCP Spark-on-K8s operator (https://github.com/GoogleCloudPlatfor...) with a native Airflow integration we developed and recently contributed back to the Airflow project (https://issues.apache.org/jira/browse.... Finally, we were able to migrate our existing Airflow DAGs, with minimal changes, from AWS EMR to K8s. In this talk, we’ll guide you through migrating Spark workloads to K8s, including: Challenges with existing Spark infrastructure and the motivation to migrate to K8s Aspects of running Spark natively on K8s (e.g monitoring, logging, etc.) Best practices for using Airflow as the orchestrator About: Databricks provides a unified data analytics platform, powered by Apache Spark™, that accelerates innovation by unifying data science, engineering and business. Read more here: https://databricks.com/product/unifie... See all the previous Summit sessions: Connect with us: Website: https://databricks.com Facebook:   / databricksinc   Twitter:   / databricks   LinkedIn:   / databricks   Instagram:   / databricksinc   Databricks is proud to announce that Gartner has named us a Leader in both the 2021 Magic Quadrant for Cloud Database Management Systems and the 2021 Magic Quadrant for Data Science and Machine Learning Platforms. Download the reports here. https://databricks.com/databricks-nam...

Comments
  • Kubernetes — Простым Языком на Понятном Примере 5 месяцев назад
    Kubernetes — Простым Языком на Понятном Примере
    Опубликовано: 5 месяцев назад
  • Making Apache Spark™ Better with Delta Lake 5 лет назад
    Making Apache Spark™ Better with Delta Lake
    Опубликовано: 5 лет назад
  • Migrating Airflow-based Spark jobs to Kubernetes - the native way 5 лет назад
    Migrating Airflow-based Spark jobs to Kubernetes - the native way
    Опубликовано: 5 лет назад
  • Apache Spark on Kubernetes -  Anirudh Ramanathan &  Tim Chen 8 лет назад
    Apache Spark on Kubernetes - Anirudh Ramanathan & Tim Chen
    Опубликовано: 8 лет назад
  • Master Apache Spark on Kubernetes and Beyond! 1 год назад
    Master Apache Spark on Kubernetes and Beyond!
    Опубликовано: 1 год назад
  • Евгений Глотов — Spark — ВСЁ! 8 дней назад
    Евгений Глотов — Spark — ВСЁ!
    Опубликовано: 8 дней назад
  • Building a Cloud Data Lake with Databricks and AWS 5 лет назад
    Building a Cloud Data Lake with Databricks and AWS
    Опубликовано: 5 лет назад
  • Ready to run! Get Started with Spark on Kubernetes 4 года назад
    Ready to run! Get Started with Spark on Kubernetes
    Опубликовано: 4 года назад
  • Deploying Apache Spark Jobs on Kubernetes with Helm and Spark Operator 5 лет назад
    Deploying Apache Spark Jobs on Kubernetes with Helm and Spark Operator
    Опубликовано: 5 лет назад
  • Мы стоим на пороге нового конфликта! Что нас ждет дальше? Андрей Безруков про США, Россию и кризис 3 дня назад
    Мы стоим на пороге нового конфликта! Что нас ждет дальше? Андрей Безруков про США, Россию и кризис
    Опубликовано: 3 дня назад
  • How To Make Apache Spark on Kubernetes Run Reliably on Spot Instances 3 года назад
    How To Make Apache Spark on Kubernetes Run Reliably on Spot Instances
    Опубликовано: 3 года назад
  • 6 технологических профессий, которые БУДУТ РАСПРОСТРАНЯТЬСЯ в 2026 году (огромный дефицит навыков!) 2 месяца назад
    6 технологических профессий, которые БУДУТ РАСПРОСТРАНЯТЬСЯ в 2026 году (огромный дефицит навыков!)
    Опубликовано: 2 месяца назад
  • Deploying Apache Spark onto a Scalable Kubernetes Cluster 2 года назад
    Deploying Apache Spark onto a Scalable Kubernetes Cluster
    Опубликовано: 2 года назад
  • Data Microservices in Apache Spark using Apache Arrow Flight 5 лет назад
    Data Microservices in Apache Spark using Apache Arrow Flight
    Опубликовано: 5 лет назад
  • Comparing Apache Spark on Kubernetes to Kubeflow 4 года назад
    Comparing Apache Spark on Kubernetes to Kubeflow
    Опубликовано: 4 года назад
  • Сисадмины больше не нужны? Gemini настраивает Linux сервер и устанавливает cтек N8N. ЭТО ЗАКОННО? 1 месяц назад
    Сисадмины больше не нужны? Gemini настраивает Linux сервер и устанавливает cтек N8N. ЭТО ЗАКОННО?
    Опубликовано: 1 месяц назад
  • Run Spark Applications As A Service In Large Scale On Kubernetes 3 года назад
    Run Spark Applications As A Service In Large Scale On Kubernetes
    Опубликовано: 3 года назад
  • Автоматизация процесса реагирования на инциденты Kubernetes (в случае сбоя вашего CNAPP) 3 месяца назад
    Автоматизация процесса реагирования на инциденты Kubernetes (в случае сбоя вашего CNAPP)
    Опубликовано: 3 месяца назад
  • Scalable Data Ingestion Architecture Using Airflow and Spark | Komodo Health 6 лет назад
    Scalable Data Ingestion Architecture Using Airflow and Spark | Komodo Health
    Опубликовано: 6 лет назад
  • Running Apache Spark Jobs Using Kubernetes 5 лет назад
    Running Apache Spark Jobs Using Kubernetes
    Опубликовано: 5 лет назад

Контактный email для правообладателей: u2beadvert@gmail.com © 2017 - 2026

Отказ от ответственности - Disclaimer Правообладателям - DMCA Условия использования сайта - TOS



Карта сайта 1 Карта сайта 2 Карта сайта 3 Карта сайта 4 Карта сайта 5