Clickhouse单机及集群部署详解

ClickHouse是近年来备受关注的开源列式数据库，主要用于数据分析（OLAP）领域。目前国内社区火热，各个大厂纷纷跟进大规模使用：

• 今日头条 内部用ClickHouse来做用户行为分析，内部一共几千个ClickHouse节点，单集群最大1200节点，总数据量几十PB，日增原始数据300TB左右。
• 腾讯内部用ClickHouse做游戏数据分析，并且为之建立了一整套监控运维体系。
• 携程内部从18年7月份开始接入试用，目前80%的业务都跑在ClickHouse上。每天数据增量十多亿，近百万次查询请求。
• 快手内部也在使用ClickHouse，存储总量大约10PB， 每天新增200TB， 90%查询小于3S。

在国外，Yandex内部有数百节点用于做用户点击行为分析，CloudFlare、Spotify等头部公司也在使用。

1、查看cpu是否支持sse4

2、下载RPM离线安装包

（1）在线下载很慢，可以先下载离线rpm安装包，推荐到https://packagecloud.io/Altinity/clickhouse/下载对应的版本号。

（2）在线下载RPM安装包

后面两个RPM安装包可以不用下载

3、使用rpm -ivh ./*.rpm 安装clickhouse，安装中可能会有依赖没有下载导致报错，安装完依赖继续安装，可以使用rpm -e *.rpm 移除已安装的安装包

4、配置clickhouse配置文件

主要需要配置的文件是/etc/clickhouse-server/config.xml、/etc/clickhouse-server/users.xml

（1）config.xml配置

这部分配置clickhouse-server的日志存放目录以及http和tcp请求端口号

配置clickhouse可以被远程ip访问

这一部分是分别配置clickhouse的数据存放目录、临时文件存放目录、用户文件路径

（2）users.xml

<users></users>里面默认会有一个用户名为default的用户，密码默认为空，可以配置<password></password>设置用户密码

新增加一个用户名为ck，密码为ckreadonly的用户，profile属性为readonly表示该用户是只读用户

按照上面步骤即可

（1）启动clickhouse服务

（2）启动clickhouse-client连接操作clickhouse

（3）使用java操作clickhouse的jdbc驱动来访问clickhouse

1、上面的clickhouse单机版安装比较容易，上面是从https://packagecloud.io/Altinity/clickhouse/下载的el7安装包，可能由于时间原因现在访问没有centos6的rpm包，所以在centos6上安装clickhouse的需要el6的rpm的安装包，可以从http://repo.yandex.ru/clickhouse/rpm/stable/x86_64/这里下载指定版本的clickhouse rpm64位包，主要是从该仓库中下载以下安装包：

下载完毕后按照上面步骤二进行各个服务器节点的单机版本安装，对于配置config.xml和users.xml文件在一个节点配置后同步到其他集群节点中即可。

2、部署zookeeper集群，在这里就不说了

3、单机版和集群版的区别就是多了一个配置clickhouse分片和副本规则，创建配置文件/etc/metrika.xml，注意要在/etc目录下面

配置文件中配置的3分片1副本模式，配置完毕后同步到其他节点即可。

4、按照步骤四里的方式在每一台集群节点上启动clickhouse服务并进入clickhouse-client客户端连接

5、测试集群是否安装成功，使用select * from system.clusters

出现这个说明安装成功，clickhouse tcp端口默认是9000我这因为端口占用所以修改成了9003端口了。

六、集群版clickhouse通过jdbc连接操作