一站式指南：ClkLog部署环境配置指南

在今天的数字化世界中，数据管理和分析工具的选择对于企业的成功至关重要。ClkLog作为一款强大的日志分析工具，能够帮助企业从海量数据中洞察业务、提升效率。然而，如何才能顺利部署ClkLog系统，使其最大化地服务于您的业务呢？本篇文章将提供一站式的ClkLog部署指南，无论您是IT新手还是资深工程师，都能通过我们的指南，轻松掌握ClkLog的部署步骤和技巧，使得数据的收集、分析和管理变得更加简单、高效。

环境准备

● CentOS 7

● JDK 1.8

● Nginx 1.18

● Redis 3.2.4

● Zookeeper 3.7.1

● Kafka 2.12-3.3.1

● Flink 1.14.6

● Clickhouse 23.2.1

● nodejs >= 8.9

● npm >=3.0.0

初始化步骤参考

创建安装目录

1  mkdir /usr/local/services

　　

Java 1.8 安装参考

下载 jdk-8u211-linux-x64.rpm

1  rpm -ivh jdk-8u211-linux-x64.rpm
2  Copy to clipboard
3  Error
4  Copied

　　

nginx 安装参考

1  yum install nginx
2  systemctl start nginx
3  Copy to clipboard
4  Error
5  Copied

　

Redis 3.2.4 安装参考

1.  从 Redis 官网下载安装包

1  wget https://download.redis.io/releases/redis-3.2.4.tar.gz
2  Copy to clipboard
3  Error
4  Copied

2.  解压

将安装包拷贝至/usr/local/services/目录并解压, 解压后进入redis安装目录：

1  cd /usr/local/services/
2  tar xzf redis-3.2.4.tar.gz
3  cd redis-3.2.4
4  Copy to clipboard
5  Error
6  Copied

　　

3.  编译

1  make
2  Copy to clipboard
3  Error
4  Copied

　　

4.  安装

1  make install
2  Copy to clipboard
3  Error
4  Copied

　　

默认情况下，Redis 会被安装在/usr/local/bin目录下

5.  修改配置

拷贝redis.conf 至/etc/redis/redis.conf

1  mkdir /etc/redis
2  cp redis.conf /etc/redis/redis.conf
3  Copy to clipboard
4  Error
5  Copied

　　

修改配置文件：/etc/redis/redis.conf

1  vim /etc/redis/redis.conf
2
3  protected-mode no
4  daemonize yes
5  appendonly yes
6  Copy to clipboard
7  Error
8  Copied

　　

6.  启动服务

1  /usr/local/bin/redis-server /etc/redis/redis.conf
2  Copy to clipboard
3  Error
4  Copied

　　

7.  检查安装是否成功

1  cd /usr/local/bin
2  ./redis-cli
3  Copy to clipboard
4  Error
5  Copied

　

Zookeeper 3.7.1 安装参考

1.  从 Zookeeper 官网下载安装包

1  wget --no-check-certificate https://dlcdn.apache.org/zookeeper/zookeeper-
 3.7.1/apache-zookeeper-3.7.1-bin.tar.gz
2  Copy to clipboard
3  Error
4  Copied

　　

2.  解压

将安装包拷贝至/usr/local/services/目录并解压, 解压后进入Zookeeper安装目录：

1  cd /usr/local/services/
2  tar -zxvf apache-zookeeper-3.7.1-bin.tar.gz
3  cd apache-zookeeper-3.7.1-bin
4  Copy to clipboard
5  Error
6  Copied

　　

3.  修改配置

拷贝配置文件，并增加配置项

1  cp ./conf/zoo_sample.cfg ./conf/zoo.cfg
2
3  admin.serverPort=8887
4  Copy to clipboard
5  Error
6  Copied

　　

4.  启动zk

1  ./bin/zkServer.sh start
2  Copy to clipboard
3  Error
4  Copied

　　

5.  检查

1  ./bin/zkServer.sh status
2  Copy to clipboard
3  Error
4  Copied

　　

Kafka 2.12-3.3.1 安装参考

1.  从 Kafka 官网下载安装包

1  wget --no-check-certificate 
https://archive.apache.org/dist/kafka/3.3.1/kafka_2.12-3.3.1.tgz
2  Copy to clipboard
3  Error
4  Copied

　

2.  解压

将安装包拷贝至/usr/local/services/目录并解压, 解压后进入Kafka安装目录：

1  cd /usr/local/services/
2  tar -xzf kafka_2.12-3.3.1.tgz
3  cd kafka_2.12-3.3.1
4  Copy to clipboard
5  Error
6  Copied

　

3.  启动

1  ./bin/kafka-server-start.sh  -daemon config/server.properties
2  Copy to clipboard
3  Error
4  Copied

　

4.  检查

创建名为test的topic

1  ./bin/kafka-topics.sh --create --bootstrap-server 127.0.0.1:9092 --replication-factor 1 --partitions 1 --topic test
2  Copy to clipboard
3  Error
4  Copied

查看to

1  ./bin/kafka-topics.sh --bootstrap-server 127.0.0.1:9092 --describe --topic test
2  Copy to clipboard
3  Error
4  Copied

　　

Flink 1.14.6 安装参考

1.  从 Flink官网下载安装包

1  wget https://archive.apache.org/dist/flink/flink-1.14.6/flink-1.14.6-bin-scala_2.12.tgz
2  Copy to clipboard
3  Error
4  Copied

　　

2.  解压

将安装包拷贝至/usr/local/services/目录，重命名为flink-1.14.6.tgz后解压, 解压后进入Flink安装目录：

1  cd /usr/local/services/
2  mv flink-1.14.6-bin-scala_2.12.tgz flink-1.14.6.tgz
3  tar -xzf flink-1.14.6.tgz
4  cd flink-1.14.6
5  Copy to clipboard
6  Error
7  Copied

　

3.  启动

1  ./bin/start-cluster.sh
2  Copy to clipboard
3  Error
4  Copied

　　

4.  检查

http://localhost:8081/

Clickhouse 23.2.1 安装参考

1.  安装clickhouse

1  yum install -y yum-utils
2  rpm --import https://repo.yandex.ru/clickhouse/CLICKHOUSE-KEY.GPG
3  yum-config-manager --add-repo https://repo.yandex.ru/clickhouse/rpm/stable/x86_64
4  yum install clickhouse-server clickhouse-client
5  Copy to clipboard
6  Error
7  Copied

　　

2.  修改用户验证信息

修改/etc/clickhouse-server/users.xml文件，在标签下设置用户验证信息。比如，我们设定一个用户名为default，密码为123456。

更多设置请参考ClickHouse官方文档。

3.  启动数据库

1  sudo systemctl enable clickhouse-server
2  sudo systemctl start clickhouse-server
3  sudo systemctl status clickhouse-server
4  Copy to clipboard
5  Error
6  Copied

　　

4.  登录数据库

1  clickhouse-client -u default --password 123456
2  Copy to clipboard
3  Error
4  Copied