-
1各行业都有大量数据产生,数据有分析价值 2大数据存储与普通数据存储方式不同,分布式存储成本低查看全部
-
1.创建目录:hadoop fs -mkdir input 2.查看文件: hadoop fs -ls hadoop fs -ls input_wordcount 3.编译java文件 javac -classpath /opt/hadoop-1.2.1/hadoop-core-1.2.1.jar:/opt/hadoop-1.2.1/lib/commons-cli-1.2.jar -d 编译后地址 编译文件 4.打包指令 jar -cvf 打包后文件名.jar 某某.class 5.提交输入文件给hadoop hadoop fs -put 文件路径 提交后的路径 例:hadoop fs -put input/* input_wordcount/ 6.提交jar给hadoop执行 hadoop jar jar包路径 执行的主函数名(主类名,main方法所在类名) 输入目录名 输出目录名 例:hadoop jar word_count_class/wordcount.jar WordCount input_wordcount output_wordcount查看全部
-
MapReduce的容错机制: 1、重复执行:执行出错重试。 2、推测执行:个别节点执行过慢的话,会重启一个同样的任务,只要其中一个执行完,其他就被终止掉。查看全部
-
ppt2-3查看全部
-
ppt2 数据改如何存储查看全部
-
ppt2-1查看全部
-
找本教材,动手实践查看全部
-
ppt1查看全部
-
HDFS体系结构查看全部
-
qq4查看全部
-
qq3查看全部
-
qq2查看全部
-
qq1查看全部
-
1、安装hadoop wget 安装包路径 2、解压hadoop压缩包 tar -zxvf 压缩包全称(包括后缀名) 3、opt目录下 conf 下 vim hadoop-env.sh修改配置: 找到#export JAVA_HOME=路径名 修改为export JAVA_HOME=安装好的JDK(配置的JAVA_HOME) 4、修改配置文件 vim core-site.xml 在<configuration>中添加配置 <property> <name>haddoop.tmp.dir</name> </property>查看全部
-
生态圈查看全部
举报
0/150
提交
取消