在cdh5.14.4安装完成并排错完成的情况下,进行如下kylin安装操作:

1、实验环境

三台CentOS 7主机,IP地址

  • 192.168.43.129 cm1
  • 192.168.43.130 cm2
  • 192.168.43.131 cm3

JDK版本:1.8.0_151
CDH版本:5.14.4
Kylin版本:2.4.1

Mysql版本:5.6.34

mysql-connector版本:mysql-connector-java-5.1.40

2、kylin下载

https://archive.apache.org/dist/kylin/

从这里下载需要的kylin版本

3. 创建目录

mkdir /usr/local/apps
cd /usr/local/apps

4. 上传并解压/usr/local/apps目录:

[root@cm1 apps]# tar -zxf apache-kylin-2.4.1-cdh57-bin.tar.gz

5. 建立软连接

[root@cm1 apps]# ln -s apache-kylin-2.4.1-cdh57-bin kylin

6. 添加环境变量

vim /etc/profile
添加 :export KYLIN_HOME=/usr/local/apps/kylin

7. 环境变量生效

[root@cm1 apps]# source /etc/profile

8. 修改kylin.properties配置文件

cd /usr/local/apps/kylin/conf
vim kylin.properties

修改:
kylin.server.cluster-servers=192.168.43.129:7070

添加配置:
kylin.job.jar=/usr/local/apps/kylin/lib/kylin-job-2.4.1.jar
kylin.coprocessor.local.jar=/usr/local/apps/kylin/lib/kylin-coprocessor-2.4.1.jar
kylin.job.yarn.app.rest.check.status.url=http://192.168.43.129:8088/ws/v1/cluster/apps/${job_id}?anonymous=true

9、修改权限
su hdfs(切换到hdfs用户)
hadoop fs -chmod 777 / (修改权限)
su (切换回root)

10、kylin环境检查

[root@cm1 bin]# cd /usr/local/apps/kylin/bin
[root@cm1 bin]# ./check-env.sh
Retrieving hadoop conf dir...
KYLIN_HOME is set to /usr/local/apps/kylin

[root@cm1 bin]# hdfs dfs -ls /    (检查权限,可以看到下面这行)
drwxr-xr-x - root supergroup 0 2017-09-01 10:23 /kylin

[root@cm1 bin]# ./find-hbase-dependency.sh
Retrieving hbase dependency...

[root@cm1 bin]# ./find-hive-dependency.sh
Retrieving hive dependency...

11、启动kylin

cd .. 回到kylin目录,然后执行下面命令
[root@cm1 kylin]# bin/kylin.sh start

关闭执行:

bin/kylin.sh stop

12、访问kylin日志
[root@cm1 kylin]# tail 200 -f logs/kylin.out

13、访问kylin
http://192.168.43.129:7070/kylin/
User: ADMIN
Pass: KYLIN

登录成功:

至此kylin安装完成。

14、导入官方测试数据进行测试

执行命令

/usr/local/apps/kylin/bin

[root@cdh01 bin]# ./sample.sh

日志倒数两行

Sample cube is created successfully in project 'learn_kylin'.

Restart Kylin Server or click Web UI => System Tab => Reload Metadata to take effect

#这句话的意思是  例子cube已成成功创建在了  工程名称叫'learn_kylin'里面了

#重启kylin或者通过webUI => System选项卡=> 重新导入元数据信息

查看Hive default库中的表,多了五张表

hive> show tables;

OK

kylin_account

kylin_cal_dt

kylin_category_groupings

kylin_country

kylin_sales

t1

Time taken: 0.015 seconds, Fetched: 6 row(s)

hive>

15、加载样例数据

在System中点击Reload Metadata重新加载元数据或者重启kylin,如下图:

导入成功之后,点击Model出现下图:

表示导入成功。

16、Cube 构建

点击Cube的Actions现象---->再点击Build

查看正在构建的cube任务,点击monitor:

  1. [root@cm1 ~]# hbase shell
  2. Java HotSpot(TM) 64-Bit Server VM warning: Using incremental CMS is deprecated and will likely be removed in a future release
  3. 19/05/24 15:51:13 INFO Configuration.deprecation: hadoop.native.lib is deprecated. Instead, use io.native.lib.available
  4. HBase Shell; enter 'help<RETURN>' for list of supported commands.
  5. Type "exit<RETURN>" to leave the HBase Shell
  6. Version 1.2.0-cdh5.14.4, rUnknown, Tue Jun 12 04:00:36 PDT 2018
  7.  
  8. hbase(main):001:0> list
  9. TABLE
  10. KYLIN_IVLJD570IG
  11. KYLIN_IYHQO0FLT5
  12. kylin_metadata
  13. 3 row(s) in 0.4620 seconds

kylin构建自动转化成mapreduce任务进行了:

17、查询构建好的Cube

  1. select sum(KYLIN_SALES.PRICE)
  2. as price_sum,KYLIN_CATEGORY_GROUPINGS.META_CATEG_NAME,KYLIN_CATEGORY_GROUPINGS.CATEG_LVL2_NAME
  3. from KYLIN_SALES inner join KYLIN_CATEGORY_GROUPINGS
  4. on KYLIN_SALES.LEAF_CATEG_ID = KYLIN_CATEGORY_GROUPINGS.LEAF_CATEG_ID and
  5. KYLIN_SALES.LSTG_SITE_ID = KYLIN_CATEGORY_GROUPINGS.SITE_ID
  6. group by KYLIN_CATEGORY_GROUPINGS.META_CATEG_NAME,KYLIN_CATEGORY_GROUPINGS.CATEG_LVL2_NAME
  7. order by KYLIN_CATEGORY_GROUPINGS.META_CATEG_NAME asc,KYLIN_CATEGORY_GROUPINGS.CATEG_LVL2_NAME desc

  

后续kylin学习参考:

https://blog.csdn.net/a_drjiaoda/article/details/86530332#commentBox

http://www.mamicode.com/info-detail-2332910.html

https://www.cnblogs.com/sh425/p/5778992.html

全程实操cdh5.14.4中集成安装kylin2.4.1与使用测试的更多相关文章

  1. 【强烈推荐,超详细,实操零失误】node.js安装 + npm安装教程 + Vue开发环境搭建

    node.js安装 + npm安装教程 + Vue开发环境搭建 [强烈推荐,超详细,实操零失误] 原博客园地址:https://www.cnblogs.com/goldlong/p/8027997.h ...

  2. CDH5.14.4中的Hue集成HBase

    1.进入CDH中的给HBase添加Thrift Server角色实例, 为了方便, 将Thrift Server添加到Hue同一主机 2.HBase Thrift Server中选择主机cm1: 3. ...

  3. Python魔术世界 1 如何使用Visual Studio在WIN10中一键安装Python3入门编程环境并测试Django

    本文通过VS安装Python和Django的环境,创建了一个Web程序,前后5分钟的操作,让你快速入门Python的编程世界,各种Python和Django的概念会在实战中给你娓娓道来. Django ...

  4. 如何在 ASP.NET MVC 中集成 AngularJS(1)

    介绍 当涉及到计算机软件的开发时,我想运用所有的最新技术.例如,前端使用最新的 JavaScript 技术,服务器端使用最新的基于 REST 的 Web API 服务.另外,还有最新的数据库技术.最新 ...

  5. Linux基础实操五

    实操一:nginx服务 二进制安装nginx包1) 1)#yum clean all 2)#yum install epel-release -y 3)#yum install nginx -y 1) ...

  6. Linux+Nginx+Supervisor部署ASP.NET Core实操手册

    一.课程介绍 在上一节课程<ASP.NET Core托管和部署Linux实操演练手册>中我们学过net core的部署方式多样性和灵活性.我们通过远程工具输入dotnet 程序集名称.dl ...

  7. 如何在Ubuntu 14.04中安装最新版Eclipse

    想必很多开发人员都知道,Ubuntu 软件源中提供的并不是最新版本的 Eclipse,本教程就教大家如何在 Ubuntu 14.04 中快速安装 Eclipse 官方发布的最新版本. 到目前为止,Ec ...

  8. 转:如何在Ubuntu 14.04中安装最新版Eclipse

    想必很多开发人员都知道,Ubuntu 软件源中提供的并不是最新版本的 Eclipse,本教程就教大家如何在 Ubuntu 14.04 中快速安装 Eclipse 官方发布的最新版本. 到目前为止,Ec ...

  9. Java Web学习系列——Maven Web项目中集成使用Spring、MyBatis实现对MySQL的数据访问

    本篇内容还是建立在上一篇Java Web学习系列——Maven Web项目中集成使用Spring基础之上,对之前的Maven Web项目进行升级改造,实现对MySQL的数据访问. 添加依赖Jar包 这 ...

随机推荐

  1. 云服务器使用: 为域名申请SSl证书

    注:咱们平时访问网站 有的是http  有的是 https https就是说使用了SSL访问 然后就是等着..... 假设可以了 然后就会有各个软件使用的证书,然后根据自己安装的软件下载证书

  2. attribute和property的区别是什么?

          attribute                                       property 标签属性 对应html                       对象属 ...

  3. Flask常用路由参数

    Flask中的路由参数: @app.route(‘/’, endpoint=’xx’ , methods=[‘GET’,...]) >endpoint后的名字,用来反向生成url的.后面的名字随 ...

  4. Python基于tkinter.messagebox实现简易消息框、对话框

    库导入: import tkinter import tkinter.messagebox 有关提示框: tkinter.messagebox.showinfo(title=None, message ...

  5. failed to execute /bin/bash: Resource temporarily unavailable的问题处理

    [admin@localhost ~]$ sudo su - scloanLast login: Tue Jun 12 14:06:31 CST 2018 on pts/3su: failed to ...

  6. 不用FTP,直接Windows与Linux下互传文件

    直接上传文件到Linux[1] Linux上输入命令:rz 直接下载Linux中的文件[2] 使用命令: sz 文件名 网上看到这个帖子,觉得很实用,转载保存 下载一个部署文件夹,到本地电脑 . 两步 ...

  7. SKF密码设备研究

    SKF介绍 SKF接口是国密标准中智能密码钥匙的C语言应用开发接口标准,目前很多国内密码密码设备厂商都为其产品提供了SKF接口的开发包.开发者可以通过统一的SKF接口开发密码应用,访问来自不同设备供应 ...

  8. 【2019年06月28日】A股最便宜的股票

    查看更多A股最便宜的股票:androidinvest.com/CNValueTop/ 经典价值三因子选股: 市盈率PE.市净率PB 和 股息分红率,按照 1:1:1的权重,选择前10大最便宜的股票. ...

  9. 【转帖】H5 手机 App 开发入门:概念篇

    H5 手机 App 开发入门:概念篇 http://www.ruanyifeng.com/blog/2019/12/hybrid-app-concepts.html 作者: 阮一峰 日期: 2019年 ...

  10. Controller如何进行重定向跳转

    因为在Controller的返回都是默认走视图解析器的InternalResourceViewResolver,而视图解析器都是进行请求转发,需要在返回时地址前加入字符redirect: 视图解析器不 ...