最新消息:天气越来越冷,记得加一件厚衣裳

Kylin 2.0.0安装之Hadoop环境配置

Kylin w3sun 2645浏览 0评论

Kylin需要运行在Hadoop节点上,为了获得更好的稳定性,建议将其部署到一台纯净的Hadoop客户机并确保其上已经安装、配置了Hive,HBase,Hadoop,HDFS等命令行客户端, 运行Kylin的Linux帐户已经获得Hadoop集群相关权限,包括HDFS文件系统、hive表、hbase表的create/write权限,MR作业的提交权限。

Hadoop环境最低要求

  • Hadoop: 2.7+
  • Hive: 0.13 – 1.2.1+
  • HBase: 0.98 – 0.99, 1.1+
  • JDK: 1.7+

测试环境基于Hortonworks HDP 2.2和Cloudera Quickstart VM 5.1。 Windows和MacOS操作系统存在某些已知问题。

为了较为顺利地安装Kylin测试环境,建议尝试使用一体化sandbox VM,例如HDP sandbox,并为其提供10 GB内存。 后续的教程将基于Hortonworks Sandbox 2.1和Cloudera QuickStart VM 5.1进行。

为了避免sandbox中的权限问题,可以直接使用root帐户。其中, Hortonworks Sandbox 2.1 root账户对应的密码为hadoop,Cloudera QuickStart VM 5.1 root账户对应的密码为cloudera。

在Virtual Box网络设置中建议使用桥接模式替代NAT模式, 桥接模式将会分配给sanbox一个独立的IP地址,以避免此类问题

启动Hadoop

使用ambari启动hadoop:

ambari-agent start 
ambari-server start

以上这两个命令成功执行后可以通过http://your_sandbox_ip:8080 (user:admin,password:admin)访问ambari主页并检查各组件的状态。 默认情况下hortonworks ambari禁用了HBase,如果需要使用则可在ambari主页上手动启动Hbase服务。

转载请注明:雪后西塘 » Kylin 2.0.0安装之Hadoop环境配置

发表我的评论
取消评论

表情

Hi,您需要填写昵称和邮箱!

  • 昵称 (必填)
  • 邮箱 (必填)
  • 网址