iis服务器助手广告
返回顶部
首页 > 资讯 > 精选 >kylin怎样安装使用
  • 248
分享到

kylin怎样安装使用

2023-06-02 23:06:15 248人浏览 泡泡鱼
摘要

这篇文章给大家分享的是有关kylin怎样安装使用的内容。小编觉得挺实用的,因此分享给大家做个参考,一起跟随小编过来看看吧。 环境我选的kylin版本是1.5.4,因为买了一本叫《Apache kylin权威指南》,书中以1.5.x

这篇文章给大家分享的是有关kylin怎样安装使用的内容。小编觉得挺实用的,因此分享给大家做个参考,一起跟随小编过来看看吧。

 环境

我选的kylin版本是1.5.4,因为买了一本叫《Apache kylin权威指南》,书中以1.5.x为蓝本,为了避免少踩坑,保持和书中版本一致。

关于kylin安装环境,参考hadoop Environment,下面是我自己的环境,只是为了学习,所有的安装都是伪分布式的,也没有关注高可用

  1. ubuntu 14.04.5 LTS

  2. hadoop-2.7.1.tar.gz

  3. jdk-8u172-linux-x64.tar.gz

  4. HBase-1.2.5-bin.tar.gz

  5. apache-kylin-1.5.4-HBase1.x-bin.tar.gz

  6. apache-Hive-1.2.1-bin.tar.gz

特别注意点:

  1. kylin的版本要和hbase的版本对应,具体参考官网说明(Hadoop Environment),其实kylin打包的名字也能看出来

  2. 注意hadoop和hbase的版本(hbase hadoop version)

  3. jdk和hbase的版本(hbase jdk version)

  4. hive和jdk版本(hive jdk version)

  5. 最好在linux环境下安装,在Mac下,启动kylin的时候,脚本会报错,当然可以改脚本 (mac无法启动kylin)。此外,在Ubuntu下安装也不省心,启动kylin也会报错,改脚本吧。那么,最好使用Centos,我尝试了,不会报错。

3. 安装

  1. 下载安装包,这个链接可以下载到apache所有的安装包,但速度不快,有些找不到的安装包,可以在这里下载(Apache Software Foundation Distribution Directory),解压

  2. 设置环境变量

export JAVA_HOME=/root/jdk1.8.0_172export HADOOP_HOME=/root/hadoop-2.7.1export HIVE_HOME=/root/hive-1.2.1export HBASE_HOME=/root/hbase-1.2.5export KYLIN_HOME=/root/kylin-1.5.4export PATH=$PATH:$JAVA_HOME/bin:$HADOOP_HOME/bin:$HADOOP_HOME/sbin:$HIVE_HOME/bin:$HBASE_HOME/bin:$KYLIN_HOME/bin
  1. 安装hadoop,主要编辑的文件有:core-site.xml、hadoop-env.sh、hdfs-site.xml、mapred-site.xml、yarn-site.xml(都在$HADOOP_HOME/etc/hadoop目录内)(hadoop Pseudo-Distributed Operation)

    然后,fORMat namenodesystem:java.io.tmpdir和system:java.io.tmpdir和{system:user.name}分别替换成/tmp和${user.name},当然还需要把mysql-connector-java.x.jar二方包加入hive的lib目录中,特别注意,使用5.x版本,不要使用6.x版本。最后,运行bin/hive

  2. 安装hbase:主要修改的文件为hbase-env.sh、hbase-site.xml(quickstart)

    • 修改hbase-env.sh,添加export JAVA_HOME=/root/jdk1.8.0_172

    • 修改hbase-site.xml

      <configuration>    <property>        <name>hbase.rootdir</name>        <value>hdfs://localhost:9000/hbase</value>    </property>    <property>        <name>hbase.cluster.distributed</name>        <value>true</value>    </property>    <property>        <name>hbase.ZooKeeper.property.dataDir</name>        <value>/root/tmp/hbase/zookeeper</value>  </property></configuration>

      特别注意,对于伪分布式安装,hbase.cluster.distributed要设置为true。此外,这里使用hbase内置的zookeeper。最后,执行bin/satrt-hbase.sh,启动hbase

  3. 安装kylin

    • 修改check-env.sh:可以先执行bin/check-env.sh,一般来说配置了上面所述的环境变量,是可以通过check,但是这个脚本在mac和ubuntu下执行还是有问题,mac下的问题我没有解决,Ubuntu下面问题解了。原因是get-properties.sh内容在Ubuntu下执行有问题。不过在centos下没有这个问题(安装指南)

      ## 原始文件if [ $# != 1 ]then    echo 'invalid input'    exit -1fiIFS=$'\n'result=for i in `cat ${KYLIN_HOME}/conf/kylin.properties | grep -w "^$1" | grep -v '^#' | awk -F= '{ n = index($0,"="); print substr($0,n+1)}' | cut -c 1-`do   :   result=$idoneecho $result
      ## 修改后的文件if [ $# != 1 ]then    echo 'invalid input'    exit -1fi#IFS=$'\n'result=`cat ${KYLIN_HOME}/conf/kylin.properties | grep -w "^$1" | grep -v '^#' | awk -F= '{ n = index($0,"="); print substr($0,n+1)}' | cut -c 1-`#for i in `cat ${KYLIN_HOME}/conf/kylin.properties | grep -w "^$1" | grep -v '^#' | awk -F= '{ n = index($0,"="); print substr($0,n+1)}' | cut -c 1-`#do#   :#   result=$i#doneecho $result
    • 我目前使用的是apache-kylin-1.5.4-HBase1.x-bin.tar.gz版本,此版本在conf目录下,把压缩相关的配置注释了,包括kylin_hive_conf.xml、kylin_job_conf_inmem.xml、 kylin_job_conf.xml、kylin.properties,我之前用1.5.3并没有注释掉,导致在运行构建cube是出现snappy不存在问题。

      # Compression codec for htable, valid value [none, snappy, lzo, gzip, lz4]# 1.5.3默认未snappy,但是我使用的hadoop的并没有snappy压缩功能,所以要么把压缩相关的配置注释掉,或者重新打包hadoopkylin.hbase.default.compression.codec=none

      之后,运行bin/kylin.sh satrt,启动成功后,访问Http://ip:7070/kylin,用户名是ADMIN,密码是KYLIN。然后可以运行bin/sample.sh,体验下kylin,运行完sample.sh后重启kylin,就可以build cube了。

感谢各位的阅读!关于“kylin怎样安装使用”这篇文章就分享到这里了,希望以上内容可以对大家有一定的帮助,让大家可以学到更多知识,如果觉得文章不错,可以把它分享出去让更多的人看到吧!

--结束END--

本文标题: kylin怎样安装使用

本文链接: https://www.lsjlt.com/news/231608.html(转载时请注明来源链接)

有问题或投稿请发送至: 邮箱/279061341@qq.com    QQ/279061341

本篇文章演示代码以及资料文档资料下载

下载Word文档到电脑,方便收藏和打印~

下载Word文档
猜你喜欢
  • kylin怎样安装使用
    这篇文章给大家分享的是有关kylin怎样安装使用的内容。小编觉得挺实用的,因此分享给大家做个参考,一起跟随小编过来看看吧。 环境我选的kylin版本是1.5.4,因为买了一本叫《Apache kylin权威指南》,书中以1.5.x...
    99+
    2023-06-02
  • 怎样使用rpm安装MySQL
    这篇文章将为大家详细讲解有关怎样使用rpm安装MySQL,小编觉得挺实用的,因此分享给大家做个参考,希望大家阅读完这篇文章后可以有所收获。使用rpm安装MySQL的方法:首先下载rpm包,并开始安装serv...
    99+
    2024-04-02
  • win7系统怎么用硬盘安装ubuntu kylin 14.10?
    相信不少Ubuntu爱好者都想装个ubuntu kylin系统自己过过瘾,但最新的几个版本里都没有了wubi.exe 没法直接安装了,所以这里就告诉大家如何在win7 下硬盘安装ubuntu 14.10 1、首先建议大家...
    99+
    2023-06-13
    win7硬盘安装ubuntu ubuntu kylin 14.10 win7 系统
  • Kylin的架构是怎样的
    Kylin是一个开源的分布式OLAP(联机分析处理)引擎,主要用于大规模数据集的多维数据分析和查询。它的架构主要包含以下几个组件: ...
    99+
    2024-04-02
  • Elasticsearch的安装使用是怎样的
    本篇文章给大家分享的是有关Elasticsearch的安装使用是怎样的,小编觉得挺实用的,因此分享给大家学习,希望大家阅读完这篇文章后可以有所收获,话不多说,跟着小编一起来看看吧。导读ElasticSearch是一个基于Lucene的搜索服...
    99+
    2023-06-04
  • 怎样安装Redis
    这篇文章主要为大家展示了“怎样安装Redis”,内容简而易懂,条理清晰,希望能够帮助大家解决疑惑,下面让小编带领大家一起研究并学习一下“怎样安装Redis”这篇文章吧。1. Redis概述Redis是什么 ...
    99+
    2024-04-02
  • 怎样安装jupyter
    这篇文章给大家分享的是有关怎样安装jupyter的内容。小编觉得挺实用的,因此分享给大家做个参考,一起跟随小编过来看看吧。安装jupyter的方法:首先打开命令提示符,输入python;然后执行jupyter的安装命令“pip instal...
    99+
    2023-06-06
  • 怎样安装php5
    这篇“怎样安装php5”除了程序员外大部分人都不太理解,今天小编为了让大家更加理解“怎样安装php5”,给大家总结了以下内容,具有一定借鉴价值,内容详细步骤清晰,细节处理妥当,希望大家通过这篇文章有所收获,下面让我们一起来看看具体内容吧。p...
    99+
    2023-06-14
  • redis怎样安装
    小编给大家分享一下redis怎样安装,相信大部分人都还不怎么了解,因此分享这篇文章给大家参考一下,希望大家阅读完这篇文章后大有收获,下面让我们一起去了解一下吧!REmote DIctionary Serve...
    99+
    2024-04-02
  • 怎样安装MySQL5.7
    这篇文章主要为大家展示了“怎样安装MySQL5.7”,内容简而易懂,条理清晰,希望能够帮助大家解决疑惑,下面让小编带领大家一起研究并学习一下“怎样安装MySQL5.7”这篇文章吧。1、先卸载原有版本mysqlrpm -qa|grep mys...
    99+
    2023-06-04
  • Hadoop怎样安装
    本篇内容介绍了“Hadoop怎样安装”的有关知识,在实际案例的操作过程中,不少人都会遇到这样的困境,接下来就让小编带领大家学习一下如何处理这些情况吧!希望大家仔细阅读,能够学有所成!用vmware workstation建立虚拟机,开始先不...
    99+
    2023-06-02
  • Linux上怎样安装使用音乐软件SoundCloud
    Linux上怎样安装使用音乐软件SoundCloud,很多新手对此不是很清楚,为了帮助大家解决这个难题,下面小编将为大家详细讲解,有这方面需求的人可以来学习下,希望你能有所收获。  对于喜欢音乐的朋友来说,SoundCloud是个不错的音乐...
    99+
    2023-06-13
  • windows怎样安装python
    这篇文章主要介绍了windows怎样安装python,具有一定借鉴价值,感兴趣的朋友可以参考下,希望大家阅读完这篇文章之后大有收获,下面让小编带着大家一起了解一下。一.下载安装包官网下载:python 3.6.0打开链接滑到页面最下方二. ...
    99+
    2023-06-15
  • 怎样安装Arch Linux
    怎样安装 Arch Linux,相信很多没有经验的人对此束手无策,为此本文总结了问题出现的原因和解决方法,通过这篇文章希望你能解决这个问题。Arch Linux是一个 x86-64 通用发行版,它流行于那些喜欢 DIY ...
    99+
    2023-06-28
  • centos怎样安装Docker
    这篇文章主要为大家展示了“centos怎样安装Docker”,内容简而易懂,条理清晰,希望能够帮助大家解决疑惑,下面让小编带领大家一起研究并学习一下“centos怎样安装Docker”这篇文章吧。安装Doc...
    99+
    2024-04-02
  • vmware14怎样安装centos7
    本篇文章为大家展示了vmware14怎样安装centos7,内容简明扼要并且容易理解,绝对能使你眼前一亮,通过这篇文章的详细介绍希望你能有所收获。普通情况下最小化安装就可以,如需要安装Oracle、WebLogic之类的,则选择“GNOME...
    99+
    2023-06-26
  • Mysql怎么样安装
    这篇文章给大家分享的是有关Mysql怎么样安装的内容。小编觉得挺实用的,因此分享给大家做个参考,一起跟随小编过来看看吧。 要慢慢的学习mysql了,先从mysql的安装开始。o...
    99+
    2024-04-02
  • ubuntu怎样安装vim
    ubuntu安装vim的方法:打开终端命令行模式。再输入以下命令安装vim。sudo apt-get install vim出现提示时,输入“y”,确定下载安装即可。...
    99+
    2024-04-02
  • Linux怎样安装vnc
    这篇文章给大家分享的是有关Linux怎样安装vnc的内容。小编觉得挺实用的,因此分享给大家做个参考,一起跟随小编过来看看吧。linux远程桌面工具vnc如何使用1. 下载IIS7服务管理工具下载地址:IIS7服务器管理工具iis服务器管理工...
    99+
    2023-06-04
  • ubuntu16.04怎样安装python3.6
    ubuntu16.04安装python3.6的方法:打开终端命令行模式。输入以下命令将下载源加入到系统的源列表。sudo add-apt-repository ppa:jonathonf/python-3.6再输入以下命令更新列表进行更新。...
    99+
    2024-04-02
软考高级职称资格查询
编程网,编程工程师的家园,是目前国内优秀的开源技术社区之一,形成了由开源软件库、代码分享、资讯、协作翻译、讨论区和博客等几大频道内容,为IT开发者提供了一个发现、使用、并交流开源技术的平台。
  • 官方手机版

  • 微信公众号

  • 商务合作