1. 全栈程序员必看首页

hive的元数据存储在derby和mysql_桌面云必须部署的组件包括

全栈程序员-站长 • • 未分类 • 阅读 3

hive的元数据存储在derby和mysql_桌面云必须部署的组件包括搭建hive的环境需要hadoop的dfs和yarn可以正常运行的情况下。准备好apache-hive-1.2.1-bin.tar.gz和mysql-libs.zip两个包hive安装步骤：解压apache-hive-1.2.1-bin.tar.gz到/usr/local/src下，并且将其重命名为hivetar-zxvfapache-hive-1.2.1-bin.tar.gzmvapache-hive-1.2.1-binhive复制/hive/conf下的hive-en.

大家好，又见面了，我是你们的朋友全栈君。如果您正在找激活码,请点击查看最新教程,关注关注公众号 “全栈程序员社区” 获取激活教程,可能之前旧版本教程已经失效.最新Idea2022.1教程亲测有效,一键激活。

Jetbrains全家桶1年46，售后保障稳定

在这里插入图片描述

??‍?博主介绍：大家好，我是芝士味的椒盐，一名在校大学生，热爱分享知识，很高兴在这里认识大家?
?擅长领域：Java、大数据、运维、电子
??如果本文章各位小伙伴们有帮助的话，?关注+??点赞+?评论+?收藏，相应的有空了我也会回访，互助！！！
?另本人水平有限，旨在创作简单易懂的文章，在文章描述时如有错，恳请各位大佬指正，在此感谢！！！

文章目录

  • 搭建hive的环境需要hadoop的dfs和yarn可以正常运行的情况下。
  • 准备好apache-hive-1.2.1-bin.tar.gz和mysql-libs.zip两个包

hive安装

  1. 解压apache-hive-1.2.1-bin.tar.gz 到/usr/local/src下，并且将其重命名为hive

    tar -zxvf apache-hive-1.2.1-bin.tar.gz
mv apache-hive-1.2.1-bin hive

    Jetbrains全家桶1年46，售后保障稳定

  2. 复制/hive/conf下的hive-env.sh.template模板并重命名为hive-env.sh

    cp hive-env.sh.template hive-env.sh

  3. 在重命名的hive-env.sh里配置参数

    export HADOOP_HOME=/usr/local/src/hadoop
export HIVE_HOME=/usr/local/src/hive/conf

  4. 修改/usr/local/src/hive/bin下的hive脚本

    # add Spark assembly jar to the classpath
if [[ -n "$SPARK_HOME" ]]
then
#如果装有spark需要指定Spark目录下的jars目录下的所有的jar包
  sparkAssemblyPath=`ls ${ 
      SPARK_HOME}/jars/*.jar`
  CLASSPATH="${CLASSPATH}:${sparkAssemblyPath}"
fi
    • 否则启动hive将报如下错误

    提示ls: 无法访问/home/software/spark-2.0.1-bin-hadoop2.7/lib/spark-assembly-*.jar: 没有那个文件或目录...

  5. 启动hadoop的hdfs和yarn

    start-dfs.sh
start-yarn.sh

  6. 在hdfs上创建tmp和/user/hive/warehouse两个目录，修改为同组可读

    #创建文件夹
hadoop fs -mkdir /tmp
hadoop fs -mkdir /user/hive/warehouse
#赋予文件夹权限
hadoop fs -chmod g+w /tmp
hadoop fs -chmod g+w /user/hive/warehouse

  7. 将hive下的jline-2.12.jar 复制替换hadoop中的jline-2.12.jar

    cp /usr/local/src/hive/lib/jline-2.12.jar /usr/local/src/hadoop/share/hadoop/yarn/lib/
rm jline-2.12.jar -rf
    • 否则启动hive会报如下错误

    Exception in thread "main" java.lang.IncompatibleClassChangeError: Found class jline.Termina

hive启动并测试

  1. 启动hive并测试查询

    #在配了环境变量bin的情况下才能使用
hive

    • 查看数据库

      hive> show databases;

    • 选择默认数据库

      hive> use default;

    • 显示默认数据库中的表

      hive> show tables;
      • TIPS:hive在hdfs中的结构

        • 数据库：在hdfs中表现为${hive.metastore.warehouse.dir}目录下一个文件夹

        • 表：在hdfs中表现所属db目录下一个文件夹，文件夹中存放该表中的具体数据

        • 如果使用Metastore自带的derby数据库，在已经有一个对话的时候再打开一个对话将报错

          Exception in thread "main" java.lang.RuntimeException: java.lang.RuntimeException: Unable to instantiate

          • 原因：推荐MySQL存储Metastore元数据，替换默认的Derby数据库
版权声明：本文内容由互联网用户自发贡献，该文观点仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容， 请联系我们举报，一经查实，本站将立刻删除。

发布者：全栈程序员-站长，转载请注明出处：https://javaforall.net/230736.html原文链接：https://javaforall.net

赞 (0)
全栈程序员-站长的头像全栈程序员-站长
0 0


相关推荐

  • ds1302实时时钟lcd1602显示_电子时钟单片机

    ds1302实时时钟lcd1602显示_电子时钟单片机

    ds1302实时时钟lcd1602显示_电子时钟单片机DS1302时钟模块LCD1602显示DS1302时钟模块相关介绍基本介绍时序图DS1302时钟模块相关介绍基本介绍DS1302可慢速充电实时时钟芯片包含实时时钟/日历和31字节的非易失性静态RAM。它经过一个简单的串行接口与微处理器通信。实时时钟/日历可对秒，分，时，日，周，月，和年进行计数，对于小于31天的月，月末的日期自动进行调整，还具有闰年校正的功能。时钟可以采用24小时格式或带AM（上午）/PM（下午）的12小时格式。31字节的==RAM==可以用来临时保存一

    全栈程序员-站长的头像 全栈程序员-站长
    2025年7月16日
    4
  • Java取整函数的使用

    Java取整函数的使用

    在开发中，取整操作使用是很普遍的，所以Java在java.lang.Math类中添加了数字取整方法。在java.lang.Math类中主要包括以下几种取整方法。方法 说明 publicstaticdoubleceil(doublea) 返回大于等于参数的最小整数。 publicstaticdoublefloor(doublea) 返回小于等于参…

    全栈程序员-站长的头像 全栈程序员-站长
    2022年4月8日
    47
  • pycharm 2021 2.3 激活码【中文破解版】 idea

    pycharm 2021 2.3 激活码【中文破解版】

    (pycharm 2021 2.3 激活码)这是一篇idea技术相关文章，由全栈君为大家提供，主要知识点是关于2021JetBrains全家桶永久激活码的内容IntelliJ2021最新激活注册码，破解教程可免费永久激活，亲测有效，下面是详细链接哦~https://javaforall.net/100143.html00OE5RWT28-eyJsa…

    全栈程序员-站长的头像 全栈程序员-站长
    2022年3月30日
    138
  • <span role="heading" aria-level="2">python教程：用简单的Python编写Web应用程序

    python教程：用简单的Python编写Web应用程序

    python教程：用简单的Python编写Web应用程序python现在已经成为很多程序员关注的编程语言之一，很多程序员也都开始弄python编程，并且很多时候都会用自己的操作来选择，而现在不管是程序员还是少儿编程，都会有python这门课，今天就和大家分

    全栈程序员-站长的头像 全栈程序员-站长
    2022年7月6日
    23
  • superset、metabase、redash三个开源BI工具的个人使用心得及分析

    superset、metabase、redash三个开源BI工具的个人使用心得及分析

    superset、metabase、redash三个开源BI工具的个人使用心得及分析数据可视化也是大数据领域里极为关键的一环 一开始我们用的是 SpringBoot ECharts 的经典组合来做可视化的 确实功能很强也很灵活 但后来随着统计需求越来越多 每来一个新需求都要写大量的重复的 MVC 代码 这等于花费了许多无用的时间和精力 这种时候就需要一个 BI 工具来简化这个过程 市面上有很多极为优秀的 BI 像 Tableau PowerBI 等 但这些都是收费的 不在考虑范围内 而开源免费的

    全栈程序员-站长的头像 全栈程序员-站长
    2025年7月15日
    6
  • U盘pe（理论大白菜、优启通、微PE都可以） 装ESXI方案 (非通用UltraISO重做启动U盘），省U盘「建议收藏」

    U盘pe（理论大白菜、优启通、微PE都可以） 装ESXI方案 (非通用UltraISO重做启动U盘），省U盘「建议收藏」

    U盘pe（理论大白菜、优启通、微PE都可以） 装ESXI方案 (非通用UltraISO重做启动U盘），省U盘「建议收藏」此文是我发的一篇的准备工作，因为ESXi6.7刚发布的原因，很多同学等着升级，故而先写了出来。原文如下：戴尔R730安装升级VMwarevSphereHypervisor(ESXi)6.7https://koolshare.cn/thread-139061-1-1.html这一篇，介绍怎样从U盘加载ISO镜像，并引导电脑/服务器，完成新安装/升级系统的操作，当然，实际中不仅仅用于ESXi的安装升级，也可以用于NAS4Free、FreeNAS、ProxmoxVE虚拟机系统，爱快软路由系统、Pan

    全栈程序员-站长的头像 全栈程序员-站长
    2025年8月31日
    17

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注

关注全栈程序员社区公众号