當前位置:成語大全網 - 書法字典 - ClickHouse數據遷移【遠程表,clickhouse-copyer】

ClickHouse數據遷移【遠程表,clickhouse-copyer】

Clickhouse-copier是數據同步的官方工具,它依靠zk來滿足跨集群數據同步的場景。

假設我們要將table_dis從集群1【ip1,ip2,ip3】復制到集群2【IP4,IP5】。Table_dis是分布式表,對應的mergetree表是table_local。

(1)ZK . XML

創建用於復制的zk.xml文件。

schema.xml

括號內標註的變量需要根據實際情況進行替換。

在IP1中執行:

click house-copier copier-daemon-config ZK . XML-task-PATH/【ZK-click house-PATH/NODE】-base-dir/【PATH】-task-upload-force true-task-file schema . XML

在三個集群中測試1000w條數據並將其寫入兩個集群需要30秒。