
CDH安装教程:YARN, Hadoop, HBase, MapReduce与Zookeeper
下载需积分: 9 | 1.19MB |
更新于2024-09-11
| 41 浏览量 | 举报
收藏
"CDH安装说明,涉及组件包括YARN、Hadoop、HBase、MapReduce和Zookeeper,图文并茂的教程"
CDH是Cloudera Distribution Including Apache Hadoop的简称,它是一个由Cloudera公司提供的开源大数据平台,包含了多个Apache Hadoop生态系统中的组件,如Hadoop、HBase、YARN、MapReduce、Zookeeper等。本安装说明将指导你如何在集群环境中安装和配置CDH。
首先,你需要在一台主机(例如192.168.0.105)上设置Cloudera Manager的yum源。这涉及到将`a-cdh5.repo`和`a-manager.repo`文件复制到`/etc/yum.repo.d`目录,并根据实际的部署环境调整这两个文件。确保在文件中IP地址与yum源主机一致,并将`gpgcheck`的值设置为0,以跳过GPG签名检查。
接着,安装`createrepo`工具,这将用于创建repo仓库。将包含CDH安装文件的`cdh.tar.gz`包解压缩到`/home/wwwroot`目录,然后将`a-cdh5.repo`和`a-manager.repo`文件复制到集群中所有其他主机的相应目录下。
完成上述步骤后,你需要准备系统光盘,并将其挂载到`/mnt/cdrom`。进入`/iop/cloudera`目录,按照提示进行安装。在安装过程中,遵循提示依次选择"next"和"yes"。
当安装完成,系统会显示相应的提示信息,表明安装成功。你可以通过访问`http://ip:7180`来访问Cloudera Manager的主页,用户名为`admin`,初始密码也为`admin`。
接下来,使用Cloudera Manager来安装和配置各个服务。首先,搜索集群中的主机,并添加Cloudera管理服务。然后,逐一安装HDFS、Zookeeper、HBase、MapReduce、YARN以及Hive。每个服务的安装都需要进行测试连接,确保所有测试都显示"successful",然后继续安装过程。
最后,为了实现高可用性,还需要启用High Availability(HA)。在CDH中,这可能涉及到配置HDFS的NameNode HA,YARN的ResourceManager HA,以及其他服务的冗余设置,以确保集群在任何单点故障时仍能正常运行。
这个安装说明涵盖了CDH的完整部署流程,包括Cloudera Manager的设置、服务的安装以及HA的配置,适用于希望在企业环境中搭建Hadoop生态系统的用户。注意在实际操作中,务必按照步骤仔细操作,并根据实际情况调整配置。
相关推荐









licunbing
- 粉丝: 2
最新资源
- Excel转mdb数据库:源代码分享与教程
- 深入解析大象购物网src源码的使用与价值
- 《多格式图像程序设计入门》PDF版珍稀资源
- C#实现简易记事本功能详细介绍
- C#.net实现简易写字板程序教程
- Flex地图API使用教程与相关资源下载
- VC环境下PictureExWnd动画显示技术深入解析
- Newprep封装工具:一键快速克隆Windows XP系统
- SDK图像采集技术:高效图像采集程序
- C#游戏开发源代码集锦与标准实践指南
- 实现可双用的COM组件:窗体与控件的简便封装
- 新手指南:JDOM包的下载与使用
- C#实现邮件群发系统的简单方法
- 递推最小二乘法应用:通过diphon方程辨识系统参数
- 深入理解Java序列化与反序列化机制
- 卡巴半年卡申请工具v1.01绿色版发布
- 掌握Java编程基础与高级特性
- grub4DOS新版本特性及Linux硬盘安装指南
- 中大微积分II课件分享:助你轻松掌握大学数学
- CSS+DIV网页设计全套教程与实例源码解析
- 网上购物系统后台数据库设计要点详解
- 微软PageDefrag:虚拟内存碎片整理工具汉化版
- 深入浅出汇编语言PPT教程:基础知识与应用
- 北航《数据结构》课程PPT:算法与数据结构的紧密联系