为了账号安全,请及时绑定邮箱和手机立即绑定

分片导入文件有问题

就拿老师举的例子,我如果500G文件分成5个文件,那我rdds怎么引入这五个文件呢?按照这上面的说法一次就只能引一个分片的文件啊

正在回答

2 回答

老师讲的那个500G文件分成5个文件是建立在文件在hdfs的基础上的,使用hdfs的文件系统路径,一次性拿文件全部内容

1 回复 有任何疑惑可以回复我~

part-*

0 回复 有任何疑惑可以回复我~

举报

0/150
提交
取消
Spark从零开始
  • 参与学习       52857    人
  • 解答问题       84    个

本课程旨在让同学们了解Spark基础知识,掌握Spark基础开发.

进入课程

分片导入文件有问题

我要回答 关注问题
微信客服

购课补贴
联系客服咨询优惠详情

帮助反馈 APP下载

慕课网APP
您的移动学习伙伴

公众号

扫描二维码
关注慕课网微信公众号