-
Reduce查看全部
-
Map过程查看全部
-
hive hbase查看全部
-
ubuntu下java环境查看全部
-
ubuntu下java环境查看全部
-
需要配置的hadoop配置文件查看全部
-
HDFS:Hadoop Distributed File System查看全部
-
jdk 安装和环境变量的配置查看全部
-
,查看全部
-
使用jps查看hadoop进程查看全部
-
设置java环境变量 修改 /etc/profile 文件 添加如下4条 1.export JAVA_HOME=/usr/lib/jvm/java-7-openjdk-amd64 2.export JRE_HOME=$JAVA_HOME/jre 3.export CLASSPATH=.:$JAVA_HOME/lib:$JRE_HOME/lib:$CLASSPATH 4.export PATH=$JAVA_HOME/bin:$JRE_HOME/bin:$PATH 注解: 1.Linux下用冒号 : 分割路径 2.$PATH / $JAVA_HOME / $JRE_HOME 是用来引用原来环境变量的值,在设置环境变量时不能把原来的值给覆盖掉 3.$CLASSPATH 中 当前目录 “.”不能丢 4.export 是把这4个变量导出为全局变量 5. source /etc/profile变量立即生效查看全部
-
Hadoop的安装<br> <br> Linux环境、jdk、配置Hadoop<br> <br> https://www.ustack.com/ 1.租用云主机、阿里云,UnitedStack查看全部
-
hadoop生态系统: 1.hdfs 2.mapreduce 3.相关开源工具: (1)hive:将sql语句转化为hadoop任务 (2)HBASE:存储结构化数据的分布式数据库,放弃事务特性,追求更高的扩展,它提供数据的随机读写和实时访问,实现对表数据的读写功能 (3)zookeeper:监控Hadoop集群里的每个节点的状态,管理整个集群的配置,维护数据节点之间的一致性 Hadoop版本(ver1.2-稳定)查看全部
-
Hadoop的功能和优势 1.Hadoop是开源的分布式存储和分布式计算平台 2.Hadoop的组成:HDFS:分步实施文件系统,存储海量数据 MspReduce:并行处理框架,实现任务分解和调度 3.Hadoop的用途:搭建大型数据仓库,PB级数据存储、处理、分析、统计等业务(搜索引擎、日志分析、商业智能、数据挖掘) 4.Hadoop优势:高扩展、低成本(普通PC机)、成熟的生态圈查看全部
-
Hadoop的前生今世 系统瓶颈:存储容量,读写速率,计算效率。。。 Google大数据三大关键技术:MapReduce、BigTable、GFS查看全部
举报
0/150
提交
取消