-
tests
查看全部 -
tests
查看全部 -
tests
查看全部 -
数据块副本，每个数据块3个副本，分布在两个机器上三个节点。保证容错性，两份在同一个机子，其他一份在另一台
心跳检测，dataNode定期向NameNode发送心跳。
（个人猜测）对照Zookeeper
leader是NameNode dataNode 是follow
二级NameNode SecondaryNameNode
定期同步元数据映像文件和修改日志。发送故障是，二级节点转正
查看全部 -
tests
查看全部 -
https://archive.apache.org/dist/hadoop/common/hadoop-1.2.1/hadoop-1.2.1.tar.gz
查看全部 -
centos下有所不同
1、下载 ： yum install java-1.7.0-openjdk
2、配置环境变量 vim /etc/profile
export JAVA_HOME=/jdk路径
export JRE_HOME=$JAVA_HOME/jre
export CLASSPATH=$JAVA_HOME/lib:$JRE_HOME/lib:$CLASSPATH
export PATH=$JAVA_HOME/lib:$JRE_HOME/lib:$PATH
3、让配置生效source /etc/profile
4、输入 java -version 进行测试查看全部 -
学习目标： 掌握大数据存储与处理技术的原理（理论） 掌握Hadoop的使用和开发能力
学习建议： 《Hadoop技术详解》《Hadoop权威指南》 Linux命令、Java编程基础
查看全部 -
namenode datanode查看全部
-
客户端发送文件读请求——>namenode返回元数据（从哪些datanode找到）——>客户端读取block，下载下来之后组装；
客户端文件拆分成block——>通知namenode返回可用的 有足够磁盘空间的datanode——>客户端对block进行写入——>流水线复制——>更新元数据 ；查看全部 -
Hadoop ： 1. HDFS 系统 2. MapReduce 框架
查看全部 -
Hadoop的组成
查看全部 -
Hadoop是什么？
查看全部 -
1.安装目录
wget http://mirror.bit.edu.cn/apache/hadoop/common/hadoop-2.6.5/hadoop-2.6.5.tar.gz
2.环境变量配置
cd /etc/profile
export JAVA_HOME=/usr/lib/jvm/java-8-openjdk-amd64
export JRE_HOME=$JAVA_HOME/jre
export CLASSPATH=JAVA_HOME/lib:$JRE_HOME/lib:$CLASSPATH
export PATH=$JAVA_HOME/bin:$JRE_HOME/bin:$PATH
3.在opt目录下解压Hadoop
tar -zxvf xxxxxx.tar.gz
4.修改配置文件
查看全部 -
设置环境变量查看全部
举报