-
推测执行 运行在 那些需要所有 map都处理完后才能进行Reduce的机器上， 推测执行可以保证任务不会因为某1-2个机器错误或故障而导致整体效率下降查看全部
-
mapred-site.xml <configuration> <property> <name>mapred.job.tracker</name> <value>imooc:9001</value> </property> </configuration>查看全部
-
hdfs-site.xml <configuration> <property> <name>dfs.data.dir</name> <value>/hadoop/data</value> </property> </configuration>查看全部
-
<configuration> <property> <name>hadoop.tmp.dir</name> <value>/hadoop</value> </property> <property> <name>dfs.name.dir</name> <value>/hadoop/name</value> </property> <property> <name>fs.default.name</name> <value>hdfs://imooc:9000</value> </property> </configuration>查看全部
-
imN查看全部
-
文件写入， 先将文件分成块， 再通过namenode了解可用的datanode, 再由客户端将块写入datanode中， datanode将块复制2份后在到namenode中更新元数据查看全部
-
每个数据块3个副本, 放在两个机架上，2个副本放在一个机架上， 另一个副本放在其他机架上。查看全部
-
设置java环境查看全部
-
开源工具： 1. Hive, 通过一些简单的 SQL 语句来完成 Hadoop 的一些任务，降低了使用 Hadoop 的门槛 2. HBase, 存储结构化数据的分布式数据库 3. zookeeper, 数据监管查看全部
-
Hadoop 的功能和优势有哪些？开源，分布式存储 + 分布式计算 (http://hadoop.apache.org) Hadoop 的组成： 1. HDFS: 分布式文件系统，存储海量的数据 2. MapReduce: 并行处理框架，实现任务分解和调度查看全部
-
Google 大数据技术 (MapReduce, BigTable, GFS) 没有开源，但一个模仿 Google 大数据技术的开源项目 hadoop 面试了查看全部
-
hadoop fs -cat input/hadoop-env.sh #查看文件查看全部
-
ver1.2稳定版本，对于初学者来说更容易上手查看全部
-
HIVE相当于一种牵引工具，可以利用它将SQL语句转化成Hadoop任务 HBase是一种存储结构化数据的分布式数据库。与传统数据库区别：Hbase放弃事务特性，追求更多的扩展。 与传统HDFS的区别：HBase提供数据的随机读写和实时访问，实现对表数据的读写功能 zookeeper工具监控Hadoop集群里面每个节点的状态，管理整个集群的配置，维护节点之间的数据一致性。查看全部
-
Hadoop优势：高扩展、低成本，成熟的生态圈。比如:hive Hbase查看全部
举报
0/150
提交
取消