-
两个核心查看全部
-
测试啊查看全部
-
mapreduce查看全部
-
Reduce过程:拿Map的中间结果进行合并(规约)和排序查看全部
-
Map过程,得到中间结果查看全部
-
WordCount单词计数: 计算文件中每个单词出现的频数,输出结果按照字母顺序排序查看全部
-
MapReduce 的容错机制 1)重复执行(出错后重复执行4次) 2)推算执行(若其中一个TaskTracker执行的特别慢,会再启动一个TaskTracker再次执行,只要其中一个先完成,就会把另外一个终止掉)查看全部
-
MapReduce作业执行过程查看全部
-
TaskTracker的角色: 1)执行任务 2)汇报任务状态查看全部
-
JobTracker的角色: 1)作业调度 2)分配任务、监控任务执行进度 3)监控TaskTracker的状态查看全部
-
Hadoop MapReduce 体系结构查看全部
-
Mapreduce 相关的 基本概念 - Job & Task - JobTraker - TaskTracke查看全部
-
对100G日志文件进行分析,首先切割成一定分数日志,分开统计之后,再对相同特点的按照规则进行交换,再进行相同结果合并,最后排序查看全部
-
MapReduce: 分而治之,一个大任务分成多个小的子任务(map)并行执行后,合并结果(reduce)查看全部
-
常用Hadoop的shell命令: #hadoop fs -format #格式化操作 #hadoop fs -ls / #展示文件 #hadoop fs -cat input/hsdf-site.xml #查看Hadoop里面的指定文件 #hadoop fs -mkdir input #未指明目录,表示在Hadoop的文件系统下的默认目录/user/root下新建 #hadoop fs -put hdsf-site.xml input/ #上传文件到Hadoop #hadoop fs -get hdfs-site.xml hdfs-site2.xml #从Hadoop下载文件 #hadoop dfsadmin -report #查看HADF使用情况(所有信息)查看全部
举报
0/150
提交
取消