-
Reduce过程查看全部
-
Map过程查看全部
-
二级NameNode,定期同步元数据映像文件和修改日志,namenode发生故障,secondaryname同步查看全部
-
心跳检测,datanode定期向namenode发送心跳消息。查看全部
-
每个数据块有3个副本,分别在两个机架内的三个节点,2个在同一个机架上,另外一个在另外的机架上。查看全部
-
HDFS使用:它提供了 shell 接口,可以进行命令行操作 hadoop namenode -format #格式化namenode hadoop fs -ls / #打印 / 目录文件列表 hadoop fs -mkdir input #创建目录 input hadoop fs -put hadoop-env.sh input/ #上传文件 hadoop-env.sh 到 input 目录下 hadoop fs -get input/abc.sh hadoop-envcomp.sh #从 input 目录中下载文件 hadoop fs -cat input/hadoop-env.sh #查看文件 input/hadoop-env.sh hadoop dfsadmin -report #dfs报告查看全部
-
Hadoop = HDFS(分布式存储) + MapReduce(分布式计算) 优势: 1.高拓展;2.低成本;3.成熟的生态圈查看全部
-
hadoop安装步骤: 1、安装JDK:apt-get install openjdk-7-jdk; 2、设置环境变量:JAVA_HOME、JRE_HOME、CLASSPATH、PATH 3、下载hadoop安装包并解压到指定目录下; 4、设置环境变量:HADOOP_HOME、PATH 5、修改相关配置文件$HADOOP_HOME/conf: 1)修改hadoop-env.sh,设置JAVA_HOME; 2)修改core-site.xml,设置hadoop.tmp.dir、dfs.name.dir、fs.default.name; 3)修改mapred-site.xml,设置mapred.job.tracker; 4)修改hdfs-site.xml,设置dfs.data.dir; 6、格式化:hadoop namenode -format; 7、启动:start-all.sh 8、检查:jps查看全部
-
mark、查看全部
-
hdfs 数据结构查看全部
-
学习查看全部
-
hbase 与hdfs的区别查看全部
-
预备知识:linux基本操作,java编程基础查看全部
-
hadoop技术指南和技术详解两本书查看全部
-
什么是MapReduce查看全部
举报
0/150
提交
取消