-
Hadoop可以用来搭建大型数据仓库,PB级数据的存储、处理、分析、统计等业务查看全部
-
Hadoop是什么? ————开源的分布式存储+分布式计算平台。 HDFS:分布式文件系统,存储海量的数据 MapReduce:并行处理框架,实现任务分界和调度查看全部
-
cd examples vim WordCount.java source /etc/profile start-all.sh jps javac -classpath /opt/hadoop-1.2.1/hadoop-core-1.2.1.jar:/opt/hadoop-1.2.1/lib/commons-cli-1.2.jar -d word_count_class/ WordCount.java cd /word_count_class/ ls jar -cvf wordcount.jar *.class ls mkdir input ls cd input/ vim file1 vim file2 cd .. hadoop fs -mkdir input_wordcount hadoop fs -put input/* input_wordcount/ hadoop fs -ls hadoop fs -ls input_wordcount hadoop fs -cat input_wordcount/file1 hadoop jar wordcount.jar WordCount input_wordcount output_wordcount hadoop fs -ls output_wordcount hadoop fs -cat output_wordcount/part-r-00000查看全部
-
hadoop: fdfs MapReduce查看全部
-
代码其实在hadoop的安装目录下有example,一般的目录是/hadoop/src/examples//org/apache/hadoop/examples/WordCount.jar 源代码 http://hadoop.apache.org/docs/r1.0.4/cn/mapred_tutorial.html查看全部
-
容错机制:重复执行,推测执行。查看全部
-
启动成功jps效果图查看全部
-
namenode管理节点查看全部
-
格式化操作命令 hadoop namenode -format查看全部
-
mapred-site.xml <property> <name>mapred.job.tracker</name> <value>localhost:9001</value> </property>查看全部
-
我的hdfs-site.xml <property> <name>dfs.data.dir</name> <value>/opt/hadoop-1.2.1/data</value> </property>查看全部
-
我的<!-- core-site.xml -->配置笔记 <property> <name>hadoop.tmp.dir</name> <value>/opt/hadoop-1.2.1/tmp</value> </property> <property> <name>dfs.name.dir</name> <value>/opt/hadoop-1.2.1/name</value> </property> <property> <name>fs.default.name</name> <value>hdfs://localhost:9000</value> </property>查看全部
-
hadoop:分布式存储+分布式计算平台查看全部
-
hadoop-1.2.1安装包 http://mirror.bit.edu.cn/apache/hadoop/common/hadoop-1.1.1/hadoop-1.2.1.tar.gz查看全部
-
Hive :将SQL语句转换成Hadoop任务,降低使用Hadoop的门槛查看全部
举报
0/150
提交
取消