Как работает S3 и зачем он нужен в 2025 году? скачать в хорошем качестве

Как работает S3 и зачем он нужен в 2025 году?

🪣 В этом видео ты узнаешь, что такое S3 и объектное хранилище — фундаментальные технологии для работы с большими данными и современной дата-инженерии. 💼 Хочешь ускорить рост в карьере? Я предлагаю менторство по дата-инженерии и IT-консультации: • Менторство: https://korsak0v.notion.site/Data-Eng... • Консультации: https://korsak0v.notion.site/Data-Eng... Я объясню: • Как устроено объектное хранилище и чем оно отличается от файлового и блочного • Почему S3 стал стандартом для хранения данных в облаках • Основные принципы архитектуры S3: buckets, объекты, ключи и метаданные • Как работает S3 API и как использовать его на практике • Реальные примеры работы с S3: создание бакетов, загрузка и чтение данных • Где применяется S3: Data Lake, резервные копии, ML, Big Data Это видео — твоя база для старта в data engineering, аналитике и работе с облачными хранилищами. Ссылки: • Менторство/консультации по IT – https://korsak0v.notion.site/Data-Eng... • TG канал – https://t.me/DataLikeQWERTY • Instagram –   / i__korsakov   • Habr – https://habr.com/ru/users/k0rsakov/pu... • Git-репозиторий из видео – https://github.com/k0rsakov/pet_proje... Подписывайся, если хочешь разбираться в практических инструментах дата-инженера! Оставляй комментарии — расскажи, как ты используешь S3 или с какими вопросами сталкивался. Тайминги: 00:00 – Начало 01:10 – Классические типы хранения 03:39 – Что такое S3? 04:45 – Как устроено объектное хранилище? 06:30 – Ключевые особенности объектного хранилища 08:35 – Почему S3 так популярен? 09:58 – Общая архитектура 10:50 – Ключевые элементы архитектуры 11:59 – Как выглядит взаимодействие 12:47 – Как обеспечивается надёжность 14:07 – Важно знать про S3 15:09 – Демонстрация на практике 17:42 – Просмотр списка бакетов (bucket) 21:14 – Просмотр списка объектов (object) 22:19 – Загрузка объекта в S3 23:00 – Просмотр списка объектов (object) после загрузки 23:38 – Создание и удаление бакета (bucket) 24:40 – Создание бакета (bucket) 25:04 – Просмотр списка бакетов после создания нового (bucket) 25:28 – Загрузка данных в S3 при помощи DuckDB 26:40 – Просмотр списка объектов (object) после загрузки при помощи DuckDB 26:58 – Чтение данных из S3 при помощи DuckDB 27:43 – Загрузка данных в S3 при помощи Pandas 28:46 – Просмотр списка объектов (object) после загрузки при помощи Pandas 29:17 – Чтение данных из S3 при помощи Pandas 29:37 – Один S3 API для всех объектных хранилищ 30:04 – Просмотр веб-интерфейсов для объектных хранилищ #S3 #объектноехранилище #dataengineering #датаинженер #облачные_технологии #BigData #ML #Python #PetProject #MinIO #Ceph