IT博客汇
  • 首页
  • 精华
  • 技术
  • 设计
  • 资讯
  • 扯淡
  • 权利声明
  • 登录 注册

    快速安装部署clickhouse和cloki

    ike‘s blog发表于 2023-07-28 00:00:00
    love 0

    安装

    clickhouse

    yum install -y yum-utils
    yum-config-manager --add-repo https://packages.clickhouse.com/rpm/clickhouse.repo
    yum install -y clickhouse-server clickhouse-client
    chmod a+x /etc/clickhouse-server/*
    

    等待安装完成后修改/etc/clickhouse-server/config.xml文件,把listen_host标签取消注释

        <listen_host>::1</listen_host>
        <listen_host>127.0.0.1</listen_host>
    

    如果需要添加密码的话修改/etc/clickhouse-server/user.xml文件,把明文密码加到password标签中即可,或者也可以使用SHA256加密后的密码,请将其放置在 password_sha256_hex 配置段。

    #shell生成加密密码的示例
      PASSWORD=$(base64 < /dev/urandom | head -c8); echo "$PASSWORD"; echo -n "$PASSWORD" | sha256sum | tr -d '-'
    

    最后启动clickhouse-server.service systemctl start clickhouse-server.service

    启动后可以lsof -i:8123 查看端口是否有,systemctl status clickhouse-server.service服务是否正常启动。

    没问题后执行clickhouse-client后即可登陆clickhouse。

    cloki

    安装命令

    yum install npm
    npm install nodejs
    npm install -g cloki pm2
    

    安装完成后启动,记得把yourpassword修改下

    cd $(dirname $(readlink -f `which cloki`)) \
      && CLICKHOUSE_SERVER="localhost" CLICKHOUSE_AUTH="default:yourpassword" CLICKHOUSE_DB="cloki" \
      pm2 start cloki --name "cloki"
    

    查看状态

    pm2 status cloki
    pm2 save
    pm2 startup
    

    使用

    cloki是支持promtail、logstash、fluentd等常用的日志采集工具,这边用promtail为例。 config.yaml

    server:
      http_listen_port: 29080
      grpc_listen_port: 0
    
    positions:
      filename: /opt/promtail/positions.yaml
    
    clients:
      - url: http://172.0.0.100:3100/loki/api/v1/push
    
    scrape_configs:
    - job_name: test-log
      pipeline_stages:
      static_configs:
      - targets:
          - localhost
        labels:
          hostname: test
          cluster: sz-test
          app: test
          __path__: /var/log/*log
    

    配置完毕后启动promtail就可以采集路径下的日志并push到loki的api并存储到clickhouse中。

    登陆部署的服务器3100端口即可访问cloki的查询界面,示例:

    参考

    官方GITHUB



沪ICP备19023445号-2号
友情链接