我想从 MySQL 转储导入 Clickhouse。我试过通过 official docs 但找不到任何东西。我试过在 Stack Overflow answer 之后使用 CSV 导入。任何帮助表示赞赏。我有一个 Ubuntu 16.04 LTS。

最佳答案

在小数据上,导出到 tsv 会起作用,但在大数据上不会起作用,因为仅导出会花费很多时间。

在这种情况下,您需要直接从 stdout 导入,clickhouse 知道如何完美地做到这一点。

示例代码:

mysql -u user  -ppass --compress -ss -e "SELECT * FROM table WHERE id >0  AND id <=1000000" db_name | sed 's/\"//g;s/\t/","/g;s/^/"/;s/$/"/' | clickhouse-client --query="INSERT INTO db_name.table FORMAT CSV"

使用这种方法,我在 7-10 小时内在 clickhouse 中导入了 500 GB 和 19 亿行

关于mysql - 从 MySQL 转储导入 Clickhouse,我们在Stack Overflow上找到一个类似的问题:https://stackoverflow.com/questions/47708424/

10-12 19:34