从远程文件加载数据

要将数据从远程文件加载到 Databend 中，可以使用 COPY INTO 命令。该命令允许您轻松地将数据从各种来源（包括远程文件）复制到 Databend 中。通过 COPY INTO，您可以指定源文件位置、文件格式和其他相关参数，以根据您的需求定制导入过程。请注意，文件必须采用 Databend 支持的格式，否则数据无法导入。有关 Databend 支持的文件格式的更多信息，请参阅 输入 & 输出文件格式。

使用 Glob 模式加载数据​

Databend 通过使用 glob 模式简化了从远程文件加载数据的过程。这些模式允许从遵循特定命名约定的多个文件中高效且灵活地导入数据。Databend 支持以下 glob 模式：

集合模式​

glob 表达式中的集合模式允许匹配集合中的任何一个字符。例如，考虑名为 data_file_a.csv、data_file_b.csv 和 data_file_c.csv 的文件。使用集合模式从所有三个文件加载数据：

COPY INTO your_table 
FROM 'https://your-remote-location/data_file_{a,b,c}.csv' ...

范围模式​

当处理名为 data_file_001.csv、data_file_002.csv 和 data_file_003.csv 的文件时，范围模式变得有用。使用范围模式从这一系列文件加载数据，如下所示：

COPY INTO your_table 
FROM 'https://your-remote-location/data_file_[001-003].csv' ...

教程 - 从远程文件加载数据​

本教程演示了如何从远程 CSV 文件将数据导入 Databend。示例文件 books.csv 包含两条记录：

Transaction Processing,Jim Gray,1992
Readings in Database Systems,Michael Stonebraker,2004

步骤 1. 创建表​

CREATE TABLE books
(
    title VARCHAR,
    author VARCHAR,
    date VARCHAR
);

步骤 2. 将数据加载到表中​

COPY INTO books
FROM 'https://datafuse-1253727613.cos.ap-hongkong.myqcloud.com/data/books.csv'
FILE_FORMAT = (
    TYPE = 'CSV',
    FIELD_DELIMITER = ',',
    RECORD_DELIMITER = '\n',
    SKIP_HEADER = 0
);

步骤 3. 验证加载的数据​

SELECT * FROM books;

┌──────────────────────────────────┬─────────────────────┬───────┐
│ title                            │ author              │ date  │
├──────────────────────────────────┼─────────────────────┼───────┤
│ Transaction Processing           │ Jim Gray            │ 1992  │
│ Readings in Database Systems     │ Michael Stonebraker │ 2004  │
└──────────────────────────────────┴─────────────────────┴───────┘