-
什么是大数据
查看全部 -
从应用入手,这个提法很好。
实践很重要
从应用入手
坚持
查看全部 -
12345
查看全部 -
12345
查看全部 -
12345
查看全部 -
数据块大小设置多少合适;
namenode如果挂掉怎么办。
查看全部 -
nodemanager:
1、管理单个节点的资源,向resourcemanager汇报
2、处理来自resourcemanager和applicationmanager的命令
查看全部 -
applicationmanager:
1、为MR类型的程序申请资源并分配给内部任务
2、负责数据切分
3、监控任务的执行及容错
查看全部 -
resourcemanager:
1、分配调度资源
2、启动并监控applicationmanager
3、监控nodemanager
查看全部 -
hdfs读文件:
1、客户端向namenode发起读数据请求
2、namenode返回给客户端文件的元数据信息(哪些数据块存储在哪些datanode)
3、客户端从datanode下载数据块,并合并数据块
查看全部 -
hdfs写流程:
1、客户端向namenode发起写数据请求,namenode返回datanode信息
2、客户端将文件分块,将第一块写进datanode,各个datanode自动完成数据块备份
3、datanode向namenode汇报完成第一块的存储,namenode通知客户端
4、开始写第二块第三块,重复步骤2和3
查看全部 -
1、数据块一般设置为128M;
2、nemenode通常通过HA做高可用:主节点和备用节点
查看全部 -
hdfs缺点
查看全部 -
hdfs优点
查看全部 -
datanode:存储并检索数据块;向namenode更新所存储的块的列表
查看全部
举报