离线centos6下安装Ambari2.2.1和HDP2.4

离线centos6下安装Ambari2.2.1和HDP2.4

1.首先要下载它们的安装包,别尝试着在yum来下,特别慢,最好的方式是通过建立本地资源的方式来安装。

http://public-repo-1.hortonworks.com/HDP/centos6/2.x/updates/2.4.0.0/HDP-2.4.0.0-centos6-rpm.tar.gz

http://public-repo-1.hortonworks.com/HDP-UTILS-1.1.0.20/repos/centos6/HDP-UTILS-1.1.0.20-centos6.tar.gz

http://public-repo-1.hortonworks.com/ambari/centos6/2.x/updates/2.2.1.0/ambari-2.2.1.0-centos6.tar.gz

2.立本地资源库 在var/www/html下建立一个hdp目录,如果没有的请先安装httpd yum install httpd 把下到的三个资源安装解压完毕之后,传到hdp目录下,然后重启httpd服务,用下面三个地址来测试一下是否可以通过网址访问了,然后准备三个文件,hdp.repo,ambari.repo,hdp-util.repo 不要按照官方说的那个做,那个是会报错的,我把我的放出来,大家自己照着弄,修改一下地址就行,然后把这三个文件复制集群中的所有机器的/etc/yum.repos.d/目录下

下面我发一下他们的内容

hdp.repo

[HDP-2.3.0.0]
name=HDP Version - HDP-2.3.0.0
baseurl=http://10.0.71.15/hdp/HDP/centos6/2.x/updates/2.3.0.0
gpgcheck=1
gpgkey=http://public-repo-1.hortonworks.com/HDP/centos6/2.x/updates/2.3.0.0/RPM-GPG-KEY/RPM-GPG-KEY-Jenkins
enabled=1
priority=1

ambari.repo

[Updates-ambari-2.2.1.0]
name=ambari-2.2.1.0 - Updates
baseurl=http://10.0.71.15/hdp/ambari/centos6/2.2.1.0-161
gpgcheck=1
gpgkey=http://public-repo-1.hortonworks.com/ambari/centos6/RPM-GPG-KEY/RPM-GPG-KEY-Jenkins
enabled=1
priority=1

hdp-util.repo

[HDP-UTILS-1.1.0.20]
name=HDP Utils Version - HDP-UTILS-1.1.0.20
baseurl=http://10.0.71.15/hdp/HDP-UTILS-1.1.0.20/repos/centos6
gpgcheck=1
gpgkey=http://public-repo-1.hortonworks.com/HDP/centos6/2.x/updates/2.3.0.0/RPM-GPG-KEY/RPM-GPG-KEY-Jenkins
enabled=1
priority=1

 

3.安装之前的准备工作

(1)设置ssh自动登陆,这个参照ssh自动登陆的那个去做就行,网址是http://www.cnblogs.com/cenyuhai/p/3280668.html

(2)设置ntpd自动启动,所有机器

chkconfig --level 5 ntpd on      
service ntpd start

(3)禁用selinux,所有机器  

vi /etc/sysconfig/selinux 设置selinux=disabled  

(4)设置时间同步,所有机器

cp /usr/share/zoneinfo/Asia/Shanghai /etc/localtime  #设置时区为北京时间,这里为上海,因为centos里面只有上海。。。    
ntpdate us.pool.ntp.org  #时间同步

没有安装ntpdate的可以yum一下    yum install -y ntpdate   

加入定时计划任务,每隔10分钟同步一下时钟   

crontab -e    

把下面的内容粘贴进去保存即可 

0-59/10 * * * * /usr/sbin/ntpdate us.pool.ntp.org | logger -t NTP

 (5)修改/etc/hosts文件,所有机器,设置如下:

192.168.1.133 hadoop.Master192.168.1.134 hadoop.SlaveT1192.168.1.135 hadoop.SlaveT2

4.修改配置文件,所有机器

yum install yum-plugin-priorities 
vi /etc/yum/pluginconf.d/priorities.conf 
#设置为以下内容
[main] 
enabled=1 gpgcheck=0

5.安装自定义的mysql服务

yum install -y mysql-server

安装完成之后用root账户登陆,执行下列命令

create database hive ; 
grant all on hive.* TO 'hive'@'%' IDENTIFIED BY 'hive'; 
create database oozie DEFAULT CHARACTER SET utf8; 
grant all on oozie.* TO 'oozie'@'%' IDENTIFIED BY 'oozie';

如果mysql也装在集群中的某个机器上面,而且该服务也装在这个台机器上面。。比如我的hadoop.SlaveT1上面挂了hive服务,mysql也在它上面就会连接不上 还需要运行以下命令

grant all on hive.* TO 'hive'@'hadoop.SlaveT1' IDENTIFIED BY 'hive';

5.安装ambari服务

yum install -y epel-release 
yum install ambari-server

//自己下载jdk linux x64,具体哪个版本,可以执行ambari-server setup时看到,放在/var/lib/ambari-server/resources下面 ,就免得它自己下了,速度老慢了。。

ambari-server setup

我的ambari数据库账号密码全是ambari

安装完毕之后启动ambari服务 ambari-server start

访问地址 ip:8080 用户名密码 admin/admin

问题:

  1. mysql 找不到驱动

yum install mysql-connector-java

    2. 使用mysql数据库,需要手工导入建库建表

mysql> create database ambari character set utf8 ;  

mysql> use ambari;  

mysql> source /var/lib/ambari-server/resources/Ambari-DDL-MySQL-CREATE.sql  

mysql> grant all privileges on ambari.* to ambari@‘%’ identified by ‘ambari’;

      3. 

Error: Package: snappy-devel-1.0.5-1.el6.x86_64 (epel)
           Requires: snappy(x86-64) = 1.0.5-1.el6
           Installed: snappy-1.1.0-1.el6.x86_64 (@anaconda-CentOS-201311272149.x86_64/6.5)
               snappy(x86-64) = 1.1.0-1.el6
           Available: snappy-1.0.5-1.el6.x86_64 (epel)
               snappy(x86-64) = 1.0.5-1.el6
解决方法: rpm -e snappy-1.1.0-1.el6.x86_64 --nodeps

4. Does not contain a valid host:port authority

hosts 主机名带下划线,应该去掉下划线。。

5. ERROR 2015-08-14 17:11:26,557 main.py:272 – Failed to start ping port listener of: [Errno 98] Address already in use

将使用amabri的进程kill 掉

start hbase

6.

resource_management.core.exceptions.Fail: Execution of '/usr/hdp/current/hbase-master/bin/hbase-daemon.sh --config /usr/hdp/current/hbase-master/conf start master' returned 127. su: warning: cannot change directory to /home/hbase: Permission denied
-bash: /home/hbase/.bash_profile: Permission denied
-bash: /usr/hdp/current/hbase-master/bin/hbase-daemon.sh: No such file or directory

发现hbase-master下没有bin/hbase-daemon.sh 文件
需要手工拷入bin 、lib

转载于:https://my.oschina.net/u/2277929/blog/660748

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请联系我们举报,一经查实,本站将立刻删除。

发布者:全栈程序员-站长,转载请注明出处:https://javaforall.net/109069.html原文链接:https://javaforall.net

(0)
全栈程序员-站长的头像全栈程序员-站长


相关推荐

  • 好用的tracker服务器_tracker服务器地址

    好用的tracker服务器_tracker服务器地址BTTracker是一款小巧便捷的BT种子制作辅助小工具,功能强大,并且可以通过导入导出数据片段来批量添加项目,当然这里主要说的是Tracker服务器列表——announce-list,但是就批量增添Tracker来说还是不够方便。然后终于找到个专门针对Tracker的编辑工具,可以将下边的TorrentTracer列表写入TrackerEditor程序同目录下的add_trackers.tx…

    2022年10月1日
    3
  • PLSQL安装步骤

    PLSQL安装步骤PLSQL安装注意事项1、安装下载PLSQL安装包,解压,默认安装选择自己需要的版本安装,一路默认即可2、添加客户端路径解压instantclient_11_2.rar放到自定义目录下,我是放在D盘下的Tools目录没有配置客户端,是无法登陆的,所以先不登录进入:找到plsql的configure–>preferences,如图配置,完成后重启即可3、配置tnsnames文件在客户端解压的目录“D:\Tools\instantclient_11_2”下创建NE

    2022年6月15日
    37
  • futex机制介绍「建议收藏」

    futex机制介绍「建议收藏」1、概念futex:asortoffast,user-spacemutualexclusionprimitive. Futex是一种用户态和内核态混合的同步机制。首先,同步的进程间通过mmap共享一段内存,futex变量就位于这段共享的内存中且操作是原子的,当进程尝试进入互斥区或者退出互斥区的时候,先去查看共享内存中的futex变量,如果没有竞争发生,则只修改futex,而不用…

    2022年4月19日
    70
  • 如何使用组策略来将 MaxTokenSize 注册表项添加到多台计算机

    如何使用组策略来将 MaxTokenSize 注册表项添加到多台计算机

    2021年8月16日
    59
  • XGBoost简介

    XGBoost简介本文据此对XGBoost的原理做简单的介绍…XGBoost[1]是2014年2月诞生的专注于梯度提升算法的机器学习函数库,此函数库因其优良的学习效果以及高效的训练速度而获得广泛的关注。仅在2015年,在Kaggle[2]竞赛中获胜的29个算法中,有17个使用了XGBoost库,而作为对比,近年大热的深度神经网络方法,这一数据则是11个。在KDDCup2015[3]竞赛中,排

    2022年6月1日
    105
  • 具体解释VB中连接access数据库的几种方法

    具体解释VB中连接access数据库的几种方法

    2021年11月30日
    48

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注

关注全栈程序员社区公众号