ClickHouse 具有强劲的数据分析能力,同时支持标准sql 查询,内置了好多聚合参数
同时可以方便的使用表函数连接不同的数据源(url,jdbc,文件目录。。。)
测试使用docker安装 参考项目 https://github.com/rongfengliang/clickhouse-docker-compose
环境准备
- docker-compose 文件
version: "3"
services:
server:
image: yandex/clickhouse-server
ports:
- "8123:8123"
- "9000:9000"
- "9009:9009"
ulimits:
nproc: 65535
nofile:
soft: 262144
hard: 262144
client:
image: yandex/clickhouse-client
command: ['--host', 'server']
- 基础数据
https://raw.githubusercontent.com/rongfengliang/clickhouse-docker-compose/master/data/info.csv
就是一个简单的csv 文件内容
运行&&测试
- 启动
docker-compose up -d
- 创建测试表
CREATE TABLE wikistat
(
project String,
subproject String,
hits UInt64,
size UInt64
) ENGINE = Log;
- 导入数据
使用docker client
docker run -i yandex/clickhouse-client --format_csv_delimiter="|" --host ${hostip} --query="INSERT INTO default.wikistat FORMAT csv" < ./data/info
- 查询测试
docker client || HouseOps client (不是很好用,不能粘贴)
docker run -i yandex/clickhouse-client --host 10.6.207.208 --query="select * from default.wikistat "
说明
以上只是简单的导入,查询,实际上clickhouse 的功能很强大,同时创建表的时候我们可以指定不同的存储引擎,支持多种数据导入格式,同时
官方文档目前来说也是比较全的。
参考资料
https://clickhouse.yandex/docs/en/
https://github.com/rongfengliang/clickhouse-docker-compose