请教一下 clickhouse 的使用问题

[iamfenges]

clickhouse 能作为 mysql 的从库吗？官网这个 MaterializedMySQL 引擎又写着是试验性的。你们是怎么使用的

[wxf666]

@weijancc #20 好奇你原来的 SQL 是啥？ 50W 数据量要 7 秒？

[Frankcox]

Clickhouse 的内存占用跟什么有关？我们有个单机 8C8G 的 Clickhouse ，里面有七八个表，两三个表有十几亿行，剩下的几千万行，日常任务都是很简单的单表根据 Time 间隔 Select ，看语句执行情况内存占用很少，只有几十还是几百 M ，但是 CPU 拉满了，且一般都是分钟级别查询。

[xieshaohu]

clickhouse 可以把 Mysql 表做外表，你想要分析方便，直接建立外表，然后 insert select 语法把数据快速导入到 clickhouse ， 之后再基于 clickhouse 做聚合分析就行了。

[zong400]

@sadfQED2 flink 是做什么，kafka 不是能直接到 ck 吗

[sadfQED2]

@zong400 流式计算引擎，通过 flink 能够在插入前做各种处理，比如拼表，过滤某些字段等等

[wu00]

@iamfenges canal 也挺不稳定的，小项目用 docker 部署了一个单机版的用来监控 binlog ，隔三岔五的假死，翻遍了日志就是没有异常；有条件还是用云服务省心。

[brader]

可以的，但是我建议你 clickhouse 库只做数据统计用，不要用于强依赖数据一致性的业务。另外 clickhouse 库一定一定要分开专门的服务器来安装，因为 clickhouse 会极致利用服务器资源，和其他软件掺杂一起，可能会影响其他软件的运行。
自动同步数据的话，你可以看看这个项目，我觉得挺好用，主要是轻量
https://github.com/brokercap/Bifrost

[v2orz]

@ianEros #3
canal 不好用，维护更新少，建议换别的 CDC 方案，比如 flink CDC ，或者 DataX

[vgbhfive]

可以把数据实时同步到 ck ，然后 ck 做数据分析，我公司就是这么搞得，实时同步工具参考 clickhouse-mysql-data-reader

[iluckypig]

分析可以，业务不行。

[lixintcwdsg]

现在大部分公司就是这么用的，从 mysql binlog 那边同步入 CK
ck 就是个只读的从库