-
MapReduce: 分而治之,一个大任务分成多个小的子任务(map),并行执行后,合并结果(reduce)查看全部
-
HDFS的使用 shell接口 格式化操作: hadoop namenode -format 展示文件: hadoop fs -ls/ hadoop fs -ls/ user 把文件放入到HDFS: hadoop fs -put hadoop-env.sh input 建文件: hadoop fs -mkdir input 查看文件: hadoop fs - cat input/hadoop-env.sh 从HFDS下载下来: hadoop fs -get input/hadoop-env.sh hadoop-env2.sh 文件系统的所有信息: hadoop dfsadmin -report查看全部
-
HDFS特点: 1. 数据冗余,硬件容错 2. 流式的数据访问 3. 存储大文件 Namenode 适用性和局限性 - 适合数据批量读写,吞吐量高 - 不适合交互式应用,低延迟很难满足 - 适合一次写入多次读取,顺序读写 - 不支持对用户并发写相同的文件查看全部
-
HDFS写文件的流程查看全部
-
HDFS读取文件流程:查看全部
-
HDFS 数据管理与容错: 二级NameNode查看全部
-
HDFS 数据管理与容错: 心跳检测查看全部
-
HDFS 数据管理与容错(存三分)查看全部
-
DataNode 存放真正数据库的文件查看全部
-
DataNode 存放真正数据库的查看全部
-
NameNode查看全部
-
基本概念(HDFS设计架构) - 块 Block 文件分块存储 默认64MB 逻辑单元 - NameNode 管理节点,存放文件元数据 - 文件与数据库的映射表 - 数据库与数据节点的映射表 - DataNode查看全部
-
Hadoop系统框架查看全部
-
启动 start-all .sh jps查看当前运行进程查看全部
-
修改4个配置文件查看全部
举报
0/150
提交
取消