Загрузка данных из Amazon AWS S3 Bucket в Snowflake Data Warehouse скачать в хорошем качестве

Загрузка данных из Amazon AWS S3 Bucket в Snowflake Data Warehouse

Узнайте, как загрузить данные из контейнера Amazon AWS S3 в хранилище данных Snowflake. Шаг: 1: Создайте учётную запись Snowflake на 30 дней. Назначьте роль ACCOUNTADMIN. Шаг: 2 Хранилище Snowflake предоставляет необходимые ресурсы, такие как ЦП, память и временное хранилище, для выполнения DML-операций. создать хранилище «Warehouse_Name»; создать базу данных «database_name» создать схему «database_name.Schema_name» Шаг: 3 Выполните следующую команду, чтобы создать объект хранилища. Этот объект поможет вам подключиться к контейнеру AWS. Создание или замена интеграции хранилища Snow_OBJ type = external_stage storage_provider = s3 enabled = true storage_aws_role_arn = 'arn:aws:iam::933658582618:role/dbt_Snowflake_Role' storage_allowed_locations = ('s3://bucky2023/'); Шаг:4 Приведенная ниже команда describe поможет вам получить имена ресурсов Amazon ARN. Имена ресурсов Amazon (ARN) уникально идентифицируют ресурсы AWS. desc integration Snow_OBJ; Шаг:5 Создание или замена формата файла csv_format type = csv field_delimiter = ',' skip_header = 1 null_if = ('NULL', 'null') empty_field_as_null = true; Шаг: 6 Этап определяет, где хранятся файлы данных, чтобы их можно было загрузить в таблицу. Создать или заменить этап snow_stage_2023 Интеграция_хранилища = Snow_OBJ url = 's3://bucky2016/' Формат_файла = csv_format; Шаг 7 Создайте целевую таблицу Создайте или замените таблицу product ( Rank_ int, Name varchar(200), Platform varchar(20), Year_ varchar(5), Month_ varchar(15), Genre varchar(50), Publisher varchar(50), Country varchar(50), City varchar(50), State varchar(50), Region varchar(50), NA_Sales decimal(2), Global_Sales decimal(2), NA_Profit decimal(2) ) Шаг 8 Используйте следующую команду копирования для загрузки данных в таблицу. copy into product from @snow_stage_2023 ON_ERROR = 'skip_file';