pyspark之从HDFS上读取文件、从本地读取文件

西西嘛呦

发布于 2020-08-26 09:55:59

5.1K00

代码可运行

运行总次数：0

代码可运行

hdfs上的路径：

path="hdfs:///主机名:端口号/地址"

本地上的路径：

path"file:///本地地址"

读取文件：

rdd=sc.textFile(path)

本文参与腾讯云自媒体同步曝光计划，分享自作者个人站点/博客。

原始发表：2020-08-11 ，如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自作者个人站点/博客前往查看

如有侵权，请联系 cloudcommunity@tencent.com 删除。

本文参与腾讯云自媒体同步曝光计划，欢迎热爱写作的你一起参与！

登录后参与评论

0 条评论

热度