卸载 TSV 文件
卸载 TSV 文件
语法:
COPY INTO { internalStage | externalStage | externalLocation }
FROM { [<database_name>.]<table_name> | ( <query> ) }
FILE_FORMAT = (
TYPE = TSV,
RECORD_DELIMITER = '<character>',
FIELD_DELIMITER = '<character>',
COMPRESSION = gzip,
OUTPUT_HEADER = true -- Unload with header
)
[MAX_FILE_SIZE = <num>]
[DETAILED_OUTPUT = true | false]
- 更多 TSV 选项请参考 TSV File Format Options
- 卸载到多个文件请使用 MAX_FILE_SIZE Copy Option
- 更多关于语法的细节可以在 COPY INTO location 中找到。
Tutorial
Step 1. 创建一个 External Stage
CREATE STAGE tsv_unload_stage
URL = 's3://unload/tsv/'
CONNECTION = (
ACCESS_KEY_ID = '<your-access-key-id>'
SECRET_ACCESS_KEY = '<your-secret-access-key>'
);
Step 2. 创建自定义 TSV 文件格式
CREATE FILE FORMAT tsv_unload_format
TYPE = TSV,
COMPRESSION = gzip; -- Unload with gzip compression
Step 3. 卸载到 TSV 文件
COPY INTO @tsv_unload_stage
FROM (
SELECT *
FROM generate_series(1, 100)
)
FILE_FORMAT = (FORMAT_NAME = 'tsv_unload_format')
DETAILED_OUTPUT = true;
结果:
┌──────────────────────────────────────────────────────────────────────────────────────────┐
│ file_name │ file_size │ row_count │
├──────────────────────────────────────────────────────────────────┼───────────┼───────────┤
│ data_99e8f5c8-79d6-43d8-80d7-13e3f4c91dd5_0002_00000000.tsv.gz │ 160 │ 100 │
└──────────────────────────────────────────────────────────────────────────────────────────┘
Step 4. 验证卸载的 TSV 文件
SELECT COUNT($1)
FROM @tsv_unload_stage
(
FILE_FORMAT => 'tsv_unload_format',
PATTERN => '.*[.]tsv[.]gz'
);
结果:
┌───────────┐
│ count($1) │
├───────────┤
│ 100 │
└───────────┘