spark---dataFrame保存成表和csv文件

保存成表

dataFrame.write()
            .mode("overwrite")
            .saveAsTable("ads_huoyun.tmp_gxq_01");
    dataFrame.coalesce(1)
1
2
3
4

保存成csv文件

 dataFrame.coalesce(1)
 .write()
    .format("csv")
    .mode("overwrite")
    .option("header","true")
    .option("compression", "uncompressed")
        .save("/tmp/guoxinqing/test_sp");
1
2
3
4
5
6
7

注意：保存成csv文件需要从hdfs get下来

hadoop fs -get "保存目录"
cd "保存目录"
mv 文件.csv 重命名.csv
iconv -f UTF-8 -t GBK -c test.csv >  test_p.csv
1
2
3
4