前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >sqoop把hive数据导入mysql出现中文乱码

sqoop把hive数据导入mysql出现中文乱码

作者头像
bboy枫亭
发布2020-09-22 11:00:01
3.7K0
发布2020-09-22 11:00:01
举报
文章被收录于专栏:csdn_blog

使用 sqoop 将 hive 数据导入 mysql 后出现乱码:

进入数据库,输入 show variables like 'character%'; 回车

我这里有两种解决办法,如下

方法1:修改数据库配置文件

(1)在下面这个位置添加几行配置

代码语言:javascript
复制
vim /etc/my.cnf
代码语言:javascript
复制
init_connect='SET collation_connection = utf8_unicode_ci'
init_connect='SET NAMES utf8'
character-set-server=utf8
collation-server=utf8_unicode_ci
skip-character-set-client-handshake

(2)重启 mysql 服务

代码语言:javascript
复制
systemctl restart mysqld.service(我这里centos7)
或
service mysqld restart(centos6)

再次查看编码:

之后再执行命令的时候在mysql数据库名后面加上?useUnicode=true&characterEncoding=utf-8就可以了。 示例:sqoop export --connect "jdbc:mysql://数据库ip:3306/数据库名称?useUnicode=true&characterEncoding=utf-8" ...

代码语言:javascript
复制
sqoop-export \
--connect "jdbc:mysql://localhost:3306/lft?useUnicode=true&characterEncoding=utf-8" \
--username root \
--password 123456 \
--table test3 \
--export-dir /user/hive/warehouse/hadoop.db/test3 \
--input-fields-terminated-by '\001';

方法2:两行命令快速搞定

用下面两行命令代替修改配置文件的步骤,然后执行命令的时候也加上?useUnicode=true&characterEncoding=utf-8就OK了。

代码语言:javascript
复制
set character_set_database=utf8;
set character_set_server=utf8;
本文参与 腾讯云自媒体同步曝光计划,分享自作者个人站点/博客。
原始发表:2020/08/09 ,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 作者个人站点/博客 前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
目录
  • 方法1:修改数据库配置文件
  • 方法2:两行命令快速搞定
相关产品与服务
云数据库 SQL Server
腾讯云数据库 SQL Server (TencentDB for SQL Server)是业界最常用的商用数据库之一,对基于 Windows 架构的应用程序具有完美的支持。TencentDB for SQL Server 拥有微软正版授权,可持续为用户提供最新的功能,避免未授权使用软件的风险。具有即开即用、稳定可靠、安全运行、弹性扩缩等特点。
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档