DataX

DataX 是阿里巴巴开发的一款开源数据集成工具。该工具旨在高效、可靠地在各种数据存储系统和平台之间传输数据，例如关系型数据库、大数据平台和云存储服务。DataX 支持广泛的数据源和数据目的地，包括但不限于 MySQL、Oracle、SQL Server、PostgreSQL、HDFS、Hive、HBase、MongoDB 等。

提示

Apache DolphinScheduler 现已增加对 Databend 作为数据源的支持。这一增强功能使你能够利用 DolphinScheduler 管理 DataX 任务，并轻松地将数据从 MySQL 加载到 Databend。

有关 DataX 的系统要求、下载和部署步骤的信息，请参阅 DataX 的快速入门指南。该指南为设置和使用 DataX 提供了详细的说明和指导。

DatabendWriter

DatabendWriter (DatabendWriter) 是 DataX 的一个集成插件，这意味着它已预先安装，无需任何手动安装。它充当无缝连接器，可以轻松地将数据从其他数据库传输到 Databend。通过 DatabendWriter，你可以利用 DataX 的功能，高效地将数据从各种数据库加载到 Databend。

DatabendWriter 支持两种操作模式：INSERT（默认）和 REPLACE。在 INSERT 模式下，会添加新数据，同时防止与现有记录冲突，以维护数据完整性。而在 REPLACE 模式下，则通过在发生冲突时用新数据替换现有记录来优先保证数据一致性。

如需了解更多关于 DatabendWriter 及其功能的信息，请参阅文档：https://github.com/alibaba/DataX/blob/master/databendwriter/doc/databendwriter.md

教程

• 使用 DataX 从 MySQL 迁移