分片导入文件有问题

就拿老师举的例子，我如果500G文件分成5个文件，那我rdds怎么引入这五个文件呢？按照这上面的说法一次就只能引一个分片的文件啊

想成为鸿鹄的燕雀

2019-11-24

源自：Spark从零开始 4-1

关注问题我要回答

1073

操作

收起

2 回答

哎呀阿坨
2020-04-21

老师讲的那个500G文件分成5个文件是建立在文件在hdfs的基础上的，使用hdfs的文件系统路径，一次性拿文件全部内容

1 回复有任何疑惑可以回复我~

收起回答

qq_慕神6491567
2019-12-22

part-*

0 回复有任何疑惑可以回复我~

收起回答

0/150

提交

取消

Spark从零开始

参与学习 52857 人
解答问题 84 个

本课程旨在让同学们了解Spark基础知识，掌握Spark基础开发.

进入课程

本课相似问答

1 回答导入问题。。

2 回答文件路径的问题

2 回答org.apache.spark的包导入失败

1 回答spark读取文件

1 回答文件的路径是hdfs上的吗

搜索更多本课相关问答

分片导入文件有问题

我要回答关注问题

热搜

最近搜索清空

分片导入文件有问题

2 回答

本课相似问答

分片导入文件有问题