Kylin 2.0.0安装之Hadoop环境配置

2018年1月25日 438 次阅读 0 条评论 0 人点赞

Kylin需要运行在Hadoop节点上,为了获得更好的稳定性,建议将其部署到一台纯净的Hadoop客户机并确保其上已经安装、配置了Hive,HBase,Hadoop,HDFS等命令行客户端, 运行Kylin的Linux帐户已经获得Hadoop集群相关权限,包括HDFS文件系统、hive表、hbase表的create/write权限,MR作业的提交权限。

Hadoop环境最低要求

  • Hadoop: 2.7+
  • Hive: 0.13 - 1.2.1+
  • HBase: 0.98 - 0.99, 1.1+
  • JDK: 1.7+

测试环境基于Hortonworks HDP 2.2和Cloudera Quickstart VM 5.1。 Windows和MacOS操作系统存在某些已知问题。

为了较为顺利地安装Kylin测试环境,建议尝试使用一体化sandbox VM,例如HDP sandbox,并为其提供10 GB内存。 后续的教程将基于Hortonworks Sandbox 2.1和Cloudera QuickStart VM 5.1进行。

为了避免sandbox中的权限问题,可以直接使用root帐户。其中, Hortonworks Sandbox 2.1 root账户对应的密码为hadoop,Cloudera QuickStart VM 5.1 root账户对应的密码为cloudera

在Virtual Box网络设置中建议使用桥接模式替代NAT模式, 桥接模式将会分配给sanbox一个独立的IP地址,以避免此类问题

启动Hadoop

使用ambari启动hadoop:

以上这两个命令成功执行后可以通过http://your_sandbox_ip:8080 (user:admin,password:admin)访问ambari主页并检查各组件的状态。 默认情况下hortonworks ambari禁用了HBase,如果需要使用则可在ambari主页上手动启动Hbase服务。

We live, we love, we lie.......

文章评论(0)