本文共 210 字,大约阅读时间需要 1 分钟。
今天,我在测试spark streaming将kafka数据写入hive中时,结果发现有部分字段的值出现了乱码。
提交spark任务时加上如下参数
--conf spark.driver.extraJavaOptions=" -Dfile.encoding=utf-8 " \--conf spark.executor.extraJavaOptions=" -Dfile.encoding=utf-8 "
转载地址:http://zecmb.baihongyu.com/