新技术论坛
搜索
查看: 653|回复: 0
打印 上一主题 下一主题

Hadoop2.6下安装Hive

[复制链接]
  • TA的每日心情
    开心
    2016-12-9 18:18
  • 签到天数: 85 天

    连续签到: 1 天

    [LV.6]常住居民II

    扫一扫,手机访问本帖
    楼主
    跳转到指定楼层
    发表于 2016-11-10 08:47:40 | 只看该作者 |只看大图 回帖奖励 |倒序浏览 |阅读模式

      安装Mysql:
      sudo apt-get install mysql-server mysql-client
      安装后检查是否启动

      创建数据库Hive和用户hadoop
      用root身份进入mysql:
      mysql -u root -p

      解压及配置Hive
      我的hadoop安装目录在 /usr/local/hadoop-2.6.4 中,解压apache-hive-1.1.1-bin.tar.gz到  /usr/local/hadoop-2.6.4/hive 中。
    1. tar –zxvf /usr/local/hadoop/hive apache-hive-1.1.1-bin.tar.gz
    复制代码

      修改 /etc/profile 文件,添加HIVE_HOME和PATH
    1. export HIVE_HOME=/usr/local/hadoop-2.6.4/hive/apache-hive-1.1.1-bin

    2. export PATH= \${PATH}:\${HIVE_HOME}/bin

    3. source /etc/profile 使配置生效
    复制代码

      在 /usr/local/hadoop-2.6.4/apache-hive-1.1.1-bin/conf 复制一份  hive-default.xml.template 为 hive-size.xml 文件
    1. cp hive-default.xml.template hive-site.xml
    复制代码

      修改内容如下,模板里面没有 hive.metastore.local ,手动添加,账户和密码是使用Mysql的账户密码:
    1. <property>
    2. <name>hive.metastore.local</name>
    3. <value>true</value>
    4. </property>
    5. <property>
    6. <name>javax.jdo.option.ConnectionURL</name>
    7. <value>jdbc:mysql://localhost:3306/hive?createDatabaseIfNotExist=true</value>
    8. <description>JDBC connect string for a JDBC metastore</description>
    9. </property>
    10. <property>
    11. <name>javax.jdo.option.ConnectionDriverName</name>
    12. <value>com.mysql.jdbc.Driver</value>
    13. <description>Driver class name for a JDBC metastore</description>
    14. </property>
    15. <property>
    16. <name>javax.jdo.option.ConnectionUserName</name>
    17. <value>root</value>
    18. <description>Username to use against metastore database</description>
    19. </property>
    20. <property>
    21. <name>javax.jdo.option.ConnectionPassword</name>
    22. <value>admin</value>
    23. <description>password to use against metastore database</description>
    24. </property>
    复制代码

      在 /usr/local/hadoop-2.6.4/apache-hive-1.1.1-bin/bin/  修改hive-config.sh添加下面的3个export语句
      export JAVA_HOME=/usr/lib/jvm/jdk1.8.0_101
      export HADOOP_HOME=/usr/local/hadoop-2.6.4
      export HIVE_HOME=/usr/local/hadoop-2.6.4/hive/apache-hive-1.1.1-bin
      将下载的 mysql-connector-java-5.1.40 中的 mysql-connector-java-5.1.40-bin.jar  复制到apache-hive-1.1.1-bin/lib 中
      启动hive
      在Mysql和Hadoop运行的情况下,使用 hive 命令运行hive:
      hive

      可能发生的问题
      (1)Exception in thread "main" java.lang.RuntimeException:  java.lang.IllegalArgumentException: java.net.URISyntaxException: Relative path  in absolute URI: \${system:java.io.tmpdir%7D/\$%7Bsystem:user.name%7D
      at  org.apache.hadoop.hive.ql.session.SessionState.start(SessionState.java:444)
      at
      处理办法:在配置文件hive-site.xml里找" system:java.io.tmpdir "把他们都换成绝对路径如:  /usr/local/hadoop-2.6.4/hive/apache-hive-1.1.1-bin/iotmp
      (2)[ERROR]
      Terminal initialization failed; falling back to unsupported
      java.lang.IncompatibleClassChangeError: Found class jline.Terminal, but  interface was expected
      原因:hadoop目录下存在老版本jline:
      /usr/local/hadoop-2.6.4/share/hadoop/yarn/lib/:
      -rw-rr 1 root root 87325 Mar 10 18:10 jline-0.9.94.jar
      解决办法:
      cp /usr/local/hadoop-2.6.4/hive/apache-hive-1.1.1-bin/lib/jline-2.12.jar  /usr/local/hadoop-2.6.4/share/hadoop/yarn/lib/



    高级模式
    B Color Image Link Quote Code Smilies

    本版积分规则

    手机版|Archiver|开发者俱乐部 ( ICP/ISP证:辽B-2-4-20110106号 IDC证:辽B-1-2-20070003号 )

    GMT+8, 2024-12-23 06:02 , Processed in 0.132896 second(s), 23 queries .

    X+ Open Developer Network (xodn.com)

    © 2009-2017 沈阳讯网网络科技有限公司

    快速回复 返回顶部 返回列表