博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
spark streaming 写入hive表中文乱码
阅读量:2429 次
发布时间:2019-05-10

本文共 210 字,大约阅读时间需要 1 分钟。

问题

今天,我在测试spark streaming将kafka数据写入hive中时,结果发现有部分字段的值出现了乱码。

解决办法

提交spark任务时加上如下参数

--conf spark.driver.extraJavaOptions=" -Dfile.encoding=utf-8 " \--conf spark.executor.extraJavaOptions=" -Dfile.encoding=utf-8 "

转载地址:http://zecmb.baihongyu.com/

你可能感兴趣的文章
【java】sting和stringbuilder与stringbuffer的区别辨析
查看>>
【Java】【算法练习】题目描述:输入一个整数数组,判断该数组是不是某二叉搜索树的后续遍历的结果。如果是输出yes,不是输出no,数组任意两个数字不相同。
查看>>
【Java】给定一个二叉树和其中的一个节点,请找出中序遍历的下一个节点且返回, 注意:树中的节点不仅包含左右子节点,同时包含父节点的指针。
查看>>
【Java】内存泄漏与内存溢出 学习总结
查看>>
【Java】命名规范
查看>>
【Java】—— java基础篇
查看>>
【Java】—— JVM篇
查看>>
【Java】【Linux】【操作系统】知识重点——操作系统篇
查看>>
【Java】【多线程】—— 多线程篇
查看>>
【计算机网络】—— TCP/IP篇
查看>>
【Java】【算法】——算法篇
查看>>
【Java】【数据库】知识重点——数据库篇
查看>>
【Java】知识重点——消息队列篇
查看>>
【Java】学习总结 —— HashMap之put()方法实现原理
查看>>
【计算机网络】【TCP】如何讲清楚Tcp的三次握手和四次挥手?
查看>>
【Java】-- Java核心知识点总结
查看>>
【数据库】SQL之重点知识点总结
查看>>
【计算机网络】计算机网络知识总结
查看>>
【Java】【Web】JavaWeb相关知识总结 2018-9-17
查看>>
【数据库】突破单一数据库的性能限制——数据库-分库分表总结 2018-9-20
查看>>