前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >hive同步hbase数据报错 columns has 10elements while hbase.columns.mapping has 11 elements

hive同步hbase数据报错 columns has 10elements while hbase.columns.mapping has 11 elements

作者头像
大数据梦想家
发布2021-01-26 11:11:04
5390
发布2021-01-26 11:11:04
举报
文章被收录于专栏:大数据成长之路

今天做hive建表数据同步hbase时报了下面这个异常。

在这里插入图片描述
在这里插入图片描述

翻译过来大致就是hbase中有11个字段,而hive中只有10个字段,很明显需要同步数据的两个表的字段数不一致!

在这里插入图片描述
在这里插入图片描述

但问题可没有简单!

在反复确认业务需求的字段数为10个,我就开始纳闷了为啥异常中总说Hbase中有11个字段?

后来查了多方资料后终于得出了答案:

在创建hive/hbase相关联的表时,hbase表结构默认会有一个字段key,如果没有一个显示的字段’key’那么在创建表的进修,会自己创建,这样hive对应的表就会出现问题,所以在hive对应的表里一定要加上key这个字段,为了避免这个问题,在hbase表结构里可以显示的添加’key’字段,这样不容易出问题。

所以我们在创建的hive表中再加一个string 类型的 key就好了٩(๑❛ᴗ❛๑)۶

本文参与 腾讯云自媒体同步曝光计划,分享自作者个人站点/博客。
原始发表:2020/01/01 ,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 作者个人站点/博客 前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
相关产品与服务
TDSQL MySQL 版
TDSQL MySQL 版(TDSQL for MySQL)是腾讯打造的一款分布式数据库产品,具备强一致高可用、全球部署架构、分布式水平扩展、高性能、企业级安全等特性,同时提供智能 DBA、自动化运营、监控告警等配套设施,为客户提供完整的分布式数据库解决方案。
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档