Hadoop进阶_技术问答

首页免费课 Hadoop进阶问答

Hadoop进阶

全部评论问答未解决精华

运行失败了没有报错怎么回事

最新回答 / 陆米

main里面加这一行

BasicConfigurator.configure();

看输出日志

1 回答 1068 浏览 3-4 mapreduce实现矩阵相乘(3)

2018-11-19

小白问一句，左侧矩阵是怎么循环遍历的呀，只看到了左侧矩阵第一行的处理，但最后是每一行都有

最新回答 / marvelousgirl

mapreduce框架会自动循环读文本的每一行

1 回答 1160 浏览 4-4 基于物品的推荐算法（代码）

2018-10-22

蓝色和绿色是两种不同的key值，为什么会进到同一个parition （2-3 Map-Shuffle-Reduce）

已采纳回答 / _这个昵称已被占用了_

因为老师的例子种reduce的partition只有两个，输入有3个key，所以其中必须有两个key落到同一个partition内。所有相同的key汇聚到一个partition，没毛病。所有蓝色的key都在一个partition内，所有绿色的key都在一个partition内，所有黄色的也一样。只是可能有多个key公用一个partition而已。为什么蓝色和绿色的两个key会进入到一个partition呢，这个要看具体的key的值和shuffer算法。比如：蓝色key=1，绿色key=3，黄色key=2，...

3 回答 1388 浏览 2-3 Map—Shuffle—Reduce

2018-10-07

老师我想知道，eclipse中是怎么将HDFS目录结构配置进来的

最新回答 / 麻雀加

连接HDFS的步骤// 准备连接HDFS的操作支持类Configuration conf = new Configuration();// 所要写入的路径，path要用于创建文件系统和创建连接hadoop的create路径Path path = new Path("hdfs://192.168.43.134:9000/input");// 创建文件系统对象FileSystem fs = path.getFileSystem(conf);// 通过文件系统来创建一个IO流，输出到ha...

1 回答 750 浏览 3-3 mapreduce实现矩阵相乘(2)

2018-10-06

显示运行失败该怎么找错

最新回答 / annnn

用log4j看错误原因

1 回答 1108 浏览 3-3 mapreduce实现矩阵相乘(2)

2018-09-17

评分矩阵的数据不够缓存怎么处理

+ 我来回答回答最高可+2积分

0 回答 880 浏览

2018-08-22

相似度矩阵 X 评分矩阵

+ 我来回答回答最高可+2积分

0 回答 1176 浏览

2018-08-20

没有目录怎么办

最新回答 / 李务实

没连接上hadoop吧百度一下确保连接上hadoop以后再把hdfs的读写权限关闭就可以创建了

1 回答 978 浏览 3-3 mapreduce实现矩阵相乘(2)

2018-08-03

job.addCacheArchive找不到该method

+ 我来回答回答最高可+2积分

3 回答 1230 浏览 3-4 mapreduce实现矩阵相乘(3)

2018-06-28

map、reduce里面的方法是什么

最新回答 / 慕标1955955

直接看源码呗。

1 回答 1114 浏览 4-3 基于物品的推荐算法（代码）

2018-06-07

reduce数量配置

最新回答 / _这个昵称已被占用了_

代码覆盖配置文件。

2 回答 1100 浏览 2-3 Map—Shuffle—Reduce

2018-05-24

找不到matrix2

已采纳回答 / 珏子

出现了java.io.FileNotFoundException: matrix2 的错误修改mapper2@Override protected void setup(Context context) throws IOException, InterruptedException { super.setup(context); //通过输入流将全局缓存变量中的右侧矩阵读入List<String>中 Configuration conf = context.getConfigur...

3 回答 764 浏览 3-4 mapreduce实现矩阵相乘(3)

2018-05-15