AI 助理
备案控制台
开发者社区 问答 正文

spark的RDD内容直接用saveAsTextFile保存到hdfs时会出现中文乱码现象，但在控制台用foreach打印该RDD数据显示是正常的，该怎么解决呢？

spark的RDD内容直接用saveAsTextFile保存到hdfs时会出现中文乱码现象，但在控制台用foreach打印该RDD数据显示是正常的，该怎么解决呢？

展开
收起
社区小助手 2019-01-30 15:01:08 6938 分享
分享
 版权
举报

版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

2 条回答
写回答
取消 提交回答
  • alisuixing

    这是因为你的控制台功能比较全，支持中文展示，你阅览hdfs文件的工具不支持中文展示，尝试换一个工具查看hdfs文件

    2019-07-17 23:27:20 举报
    赞同 评论

    评论

    全部评论 (0)

    登录后可评论
  • 1426694731350515

    路过

    2019-07-17 23:27:20 举报
    赞同 评论

    评论

    全部评论 (0)

    登录后可评论
问答分类：
分布式计算 Spark
问答标签：
apache spark rdd 文件存储HDFS版数据 apache spark数据 apache spark HDFS spark文件存储HDFS版
问答地址：
开发者社区 > 大数据 > 问答
相关问答
IDEA控制台输出异常区域，使用通义灵码按钮分析的时候，输出的代码里面的中文乱码。
131
0
0
spark 写入oss-hdfs任务，spark客户端一直在等待，如何解决？
104
1
0
MaxCompute spark出现中文乱码
45
1
0
Arthas的控制台输入中文乱码这个要怎么解决呢？
526
1
0
MaxCompute中odps spark节点show的时候打印出来中文乱码是什么原因呢？
154
1
0
可否在后面总结RDS（hdfs spark presto)那里加上对emr-impala 的补充？
305
1
0
RDS RDD是一直留在内存中的，整个计算过程不落盘，最后output到HDFS才落盘是吗？
465
1
0
如何在EMR Hive或Spark中访问OSS-HDFS
182
1
0
请教一个问题。我在用spark读取hbase数据时，默认是一个regoin一个task。发现有些re
1140
0
0
任务编排里的跨库spark sql 数据加工用不了
706
0
0