
hadoop
文章平均质量分 68
iteye_5392
这个作者很懒,什么都没留下…
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
ipc.Client: Retrying connect to server. ——hadoop学习第1天
第一天,配置hadoop,伪分布式,出现错误 按照教程:输入 bin/hadoop fs -get output output 结果出现如下错误: ipc.Client: Retrying connect to server: localhost/127.0.0.1:9000. Already tried 0 time(s). cat logs/hadoop-[用户名]-namen...原创 2012-03-13 20:27:17 · 293 阅读 · 0 评论 -
Hadoop HDFS配置——UnknownHostException
centos linux 系统: 新增加了一个datanode节点,启动时发现如下错误.......... 2012-12-31 15:49:11,853 ERROR org.apache.hadoop.hdfs.server.datanode.DataNode: java.net.UnknownHostException: locahost: locahost at java.net....原创 2012-12-31 17:12:57 · 1165 阅读 · 0 评论 -
Hadoop HDFS——配置
设有3台机器,其中一台作为主机,即NameNode;另外2台为从机即DataNode(注:NameNode也可以作为DataNode) NameNode,存储分布式分件属性、日志等,DataNode则是真正存储实际数据的。 各机器都是以root用户登录的(其他用户也可以)。 主机IP 192.168.1.32 从机IP 192.168.1.26 从机IP 192.168.1.27...原创 2012-12-29 20:13:49 · 140 阅读 · 0 评论 -
HBase部署文档——第1章(译)
1.2. 快速开始 本向导描述如何启动使用本地文件系统的单机版(standlone)HBase。包含创建表(table),通过HBase shell插入行(rows),以及如何清除数据和关闭单机HBase。下面练习应该不超过10分钟(不包含下载安装时间) 在开始之前,确认已阅览先决条件。 Loopback IP HBase需要loopback IP地址设为127.0.0.1. Ubuntu...原创 2012-12-17 23:05:25 · 128 阅读 · 0 评论 -
Hadoop学习第0天——配置分布式(译)
Prerequisites先决条件 Required Software JavaTM 1.6.x, preferably from Sun, must be installed.至少是JAVA1.6,最好是SUN公司的,而不是Open JDK ssh must be installed and sshd must be running to use the Hado...原创 2012-12-12 14:25:16 · 126 阅读 · 0 评论 -
HBase
标记下:先翻译下HBase,hadoop未必全部需要,HBase不可少(构建在Hadoop的HDFS之上,实际上依赖于Hadoop,如果只是测试在单机运行,不需要安装配置Hadoop,如果需要分布式,还是需要的),看了下cassandra,accumulo,都大同小异,主要是没有深入到源码级别。 When Would I Use HBase? Use HBase when you need ...原创 2012-11-07 14:17:48 · 129 阅读 · 0 评论 -
cloudermanager添加主机时的安装错误整理
错误1:host host -t PTR XXX domain name pointer localhost. 错误原因: DNS反解析,域名没有配置dns 解决办法: 去掉/usr/bin/host mv /usr/host host.bak 然后再次添加主机 heipark.iteye.com/blog/2010432 https://community...原创 2015-09-15 18:01:03 · 801 阅读 · 0 评论 -
Hadoop学习第4天——JobTracker TaskTracker
翻译《Pro Hadoop 》Jason Venner著,部分章节 JobTracker & TaskTracker The framework provides two processes that handle the management of MapReduce jobs:• TaskTracker manages the execution of individual map...原创 2012-04-16 23:13:11 · 212 阅读 · 0 评论 -
序列化Writable与RPC——hadoop学习第三天
序列化org.apache.hadoop.io 中定义了大量的可序列化对象,实现了Writable 接口。而不是使用JAVA的Serializable 不过没有看出什么异同 使用RPC 通信,org.apache.hadoop.rpc也就有了类Client和类Server ObjectWritable,对象的序列化,用于RPC上传递序列化的对象...原创 2012-03-16 14:54:44 · 158 阅读 · 0 评论 -
hadoop学习——第二天
继续昨天问题:今天已经解决,调通了(hadoop 1.0.0) 问题 2012-03-13 20:12:57,764 ERROR org.apache.hadoop.hdfs.server.namenode.FSNamesystem: FSNamesystem initialization failed. 原因是没有fomat namenode 执行如下命令 bi...原创 2012-03-14 19:03:24 · 114 阅读 · 0 评论 -
hdfs读取文件出发java.io.EOFException异常
[2014-05-05 17:42:51] [main] DEBUG - Error making BlockReader. Closing stale NioInetPeer(Socket[addr=/XXXXX,port=50010,localport=55897]) java.io.EOFException: Premature EOF: no length prefix avail...原创 2014-05-05 17:50:34 · 1922 阅读 · 0 评论