成人午夜视频全免费观看高清-秋霞福利视频一区二区三区-国产精品久久久久电影小说-亚洲不卡区三一区三区一区

kylin怎樣安裝使用

這篇文章給大家分享的是有關(guān)kylin怎樣安裝使用的內(nèi)容。小編覺(jué)得挺實(shí)用的,因此分享給大家做個(gè)參考,一起跟隨小編過(guò)來(lái)看看吧。

創(chuàng)新互聯(lián)堅(jiān)持“要么做到,要么別承諾”的工作理念,服務(wù)領(lǐng)域包括:成都網(wǎng)站設(shè)計(jì)、成都網(wǎng)站制作、企業(yè)官網(wǎng)、英文網(wǎng)站、手機(jī)端網(wǎng)站、網(wǎng)站推廣等服務(wù),滿足客戶于互聯(lián)網(wǎng)時(shí)代的碌曲網(wǎng)站設(shè)計(jì)、移動(dòng)媒體設(shè)計(jì)的需求,幫助企業(yè)找到有效的互聯(lián)網(wǎng)解決方案。努力成為您成熟可靠的網(wǎng)絡(luò)建設(shè)合作伙伴!

 環(huán)境

我選的kylin版本是1.5.4,因?yàn)橘I了一本叫《Apache kylin權(quán)威指南》,書中以1.5.x為藍(lán)本,為了避免少踩坑,保持和書中版本一致。

關(guān)于kylin安裝環(huán)境,參考 Hadoop Environment ,下面是我自己的環(huán)境,只是為了學(xué)習(xí),所有的安裝都是偽分布式的,也沒(méi)有關(guān)注高可用

  1. Ubuntu 14.04.5 LTS

  2. hadoop-2.7.1.tar.gz

  3. jdk-8u172-linux-x64.tar.gz

  4. hbase-1.2.5-bin.tar.gz

  5. apache-kylin-1.5.4-HBase1.x-bin.tar.gz

  6. apache-hive-1.2.1-bin.tar.gz

特別注意點(diǎn):

  1. kylin的版本要和hbase的版本對(duì)應(yīng),具體參考官網(wǎng)說(shuō)明( Hadoop Environment ),其實(shí)kylin打包的名字也能看出來(lái)

  2. 注意hadoop和hbase的版本( hbase hadoop version )

  3. jdk和hbase的版本( hbase jdk version )

  4. hive和jdk版本( hive jdk version )

  5. 最好在linux環(huán)境下安裝,在mac下,啟動(dòng)kylin的時(shí)候,腳本會(huì)報(bào)錯(cuò),當(dāng)然可以改腳本 ( mac無(wú)法啟動(dòng)kylin )。此外,在Ubuntu下安裝也不省心,啟動(dòng)kylin也會(huì)報(bào)錯(cuò),改腳本吧。那么,最好使用centos,我嘗試了,不會(huì)報(bào)錯(cuò)。

3. 安裝

  1. 下載安裝包,這個(gè)鏈接可以下載到apache所有的安裝包,但速度不快,有些找不到的安裝包,可以在這里下載( Apache Software Foundation Distribution Directory ),解壓

  2. 設(shè)置環(huán)境變量

export JAVA_HOME=/root/jdk1.8.0_172
export HADOOP_HOME=/root/hadoop-2.7.1
export HIVE_HOME=/root/hive-1.2.1
export HBASE_HOME=/root/hbase-1.2.5
export KYLIN_HOME=/root/kylin-1.5.4
export PATH=$PATH:$JAVA_HOME/bin:$HADOOP_HOME/bin:$HADOOP_HOME/sbin:$HIVE_HOME/bin:$HBASE_HOME/bin:$KYLIN_HOME/bin
  1. 安裝hadoop,主要編輯的文件有:core-site.xml、hadoop-env.sh、hdfs-site.xml、mapred-site.xml、yarn-site.xml(都在$HADOOP_HOME/etc/hadoop目錄內(nèi))( hadoop Pseudo-Distributed Operation )

    然后,format namenodesystem:java.io.tmpdir和system:java.io.tmpdir和{system:user.name}分別替換成/tmp和${user.name},當(dāng)然還需要把MySQL-connector-java.x.jar二方包加入hive的lib目錄中,特別注意,使用5.x版本,不要使用6.x版本。最后,運(yùn)行bin/hive

  2. 安裝hbase:主要修改的文件為hbase-env.sh、hbase-site.xml( quickstart )

    • 修改hbase-env.sh,添加export JAVA_HOME=/root/jdk1.8.0_172

    • 修改hbase-site.xml

      <configuration>
          <property>
              <name>hbase.rootdir</name>
              <value>hdfs://localhost:9000/hbase</value>
          </property>
          <property>
              <name>hbase.cluster.distributed</name>
              <value>true</value>
          </property>
          <property>
              <name>hbase.zookeeper.property.dataDir</name>
              <value>/root/tmp/hbase/zookeeper</value>
        </property>
      </configuration>

      特別注意,對(duì)于偽分布式安裝,hbase.cluster.distributed要設(shè)置為true。此外,這里使用hbase內(nèi)置的zookeeper。最后,執(zhí)行bin/satrt-hbase.sh,啟動(dòng)hbase

  3. 安裝kylin

    • 修改check-env.sh:可以先執(zhí)行bin/check-env.sh,一般來(lái)說(shuō)配置了上面所述的環(huán)境變量,是可以通過(guò)check,但是這個(gè)腳本在mac和ubuntu下執(zhí)行還是有問(wèn)題,mac下的問(wèn)題我沒(méi)有解決,Ubuntu下面問(wèn)題解了。原因是get-properties.sh內(nèi)容在Ubuntu下執(zhí)行有問(wèn)題。不過(guò)在centos下沒(méi)有這個(gè)問(wèn)題( 安裝指南 )

      ## 原始文件
      if [ $# != 1 ]
      then
          echo 'invalid input'
          exit -1
      fi
      IFS=$'\n'
      result=
      for i in `cat ${KYLIN_HOME}/conf/kylin.properties | grep -w "^$1" | grep -v '^#' | awk -F= '{ n = index($0,"="); print substr($0,n+1)}' | cut -c 1-`
      do
         :
         result=$i
      done
      echo $result
      ## 修改后的文件
      if [ $# != 1 ]
      then
          echo 'invalid input'
          exit -1
      fi
      #IFS=$'\n'
      result=`cat ${KYLIN_HOME}/conf/kylin.properties | grep -w "^$1" | grep -v '^#' | awk -F= '{ n = index($0,"="); print substr($0,n+1)}' | cut -c 1-`
      #for i in `cat ${KYLIN_HOME}/conf/kylin.properties | grep -w "^$1" | grep -v '^#' | awk -F= '{ n = index($0,"="); print substr($0,n+1)}' | cut -c 1-`
      #do
      #   :
      #   result=$i
      #done
      echo $result
    • 我目前使用的是apache-kylin-1.5.4-HBase1.x-bin.tar.gz版本,此版本在conf目錄下,把壓縮相關(guān)的配置注釋了,包括kylin_hive_conf.xml、kylin_job_conf_inmem.xml、 kylin_job_conf.xml、kylin.properties,我之前用1.5.3并沒(méi)有注釋掉,導(dǎo)致在運(yùn)行構(gòu)建cube是出現(xiàn)snappy不存在問(wèn)題。

      # Compression codec for htable, valid value [none, snappy, lzo, gzip, lz4]
      # 1.5.3默認(rèn)未snappy,但是我使用的hadoop的并沒(méi)有snappy壓縮功能,所以要么把壓縮相關(guān)的配置注釋掉,或者重新打包hadoop
      kylin.hbase.default.compression.codec=none

      之后,運(yùn)行bin/kylin.sh satrt,啟動(dòng)成功后,訪問(wèn) http://ip:7070/kylin ,用戶名是ADMIN,密碼是KYLIN。然后可以運(yùn)行bin/sample.sh,體驗(yàn)下kylin,運(yùn)行完sample.sh后重啟kylin,就可以build cube了。

感謝各位的閱讀!關(guān)于“kylin怎樣安裝使用”這篇文章就分享到這里了,希望以上內(nèi)容可以對(duì)大家有一定的幫助,讓大家可以學(xué)到更多知識(shí),如果覺(jué)得文章不錯(cuò),可以把它分享出去讓更多的人看到吧!

標(biāo)題名稱:kylin怎樣安裝使用
分享地址:http://jinyejixie.com/article16/ijjhgg.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供品牌網(wǎng)站建設(shè)、手機(jī)網(wǎng)站建設(shè)、標(biāo)簽優(yōu)化、外貿(mào)建站、外貿(mào)網(wǎng)站建設(shè)、靜態(tài)網(wǎng)站

廣告

聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請(qǐng)盡快告知,我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng),如需處理請(qǐng)聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時(shí)需注明來(lái)源: 創(chuàng)新互聯(lián)

成都做網(wǎng)站
高阳县| 峨眉山市| 饶阳县| 河东区| 来安县| 彩票| 册亨县| 忻城县| 临高县| 体育| 长葛市| 页游| 孟州市| 定结县| 湖州市| 东山县| 合水县| 南乐县| 江达县| 彩票| 建阳市| 独山县| 呼和浩特市| 清涧县| 哈巴河县| 大余县| 尤溪县| 宁波市| 漳浦县| 汶上县| 磴口县| 鄂尔多斯市| 漳州市| 怀仁县| 富平县| 龙南县| 文登市| 四子王旗| 高平市| 柳江县| 如皋市|