腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
是否
可以
在
配置
单元
中
手动
更改
分区
大小
?
hive
、
size
、
partition
、
alter
实际上,每当我们
在
hive
中
创建
分区
时,会分配多少
大小
。
是否
与1个
分区
对应1个Block,即128MB?还有可能改变
分区
的
大小
吗?
浏览 9
提问于2019-03-23
得票数 0
1
回答
配置
单元
表保留支持
hadoop
、
hive
我希望对旧
分区
的Hive表支持保留。基本上,我需要在特定时间段后自动删除
配置
单元
分区
。我
可以
手动
执行此操作,也
可以
使用脚本执行此操作,但我注意到每个
配置
单元
表中都存在保留属性,但我找不到有关它的许多信息。例如,
在
配置
单元
表中使用descibe时,会有一个保留属性 desc formatted my_hive_table;col_name
浏览 11
提问于2019-04-02
得票数 0
1
回答
使用__HIVE_DEFAULT_PARTITION__值创建
分区
hadoop
、
hive
在
配置
单元
中
是否
可以
手动
创建带有\__HIVE_DEFAULT_PARTITION__值的
分区
?='');附注:动态
分区
不适合我的需求
浏览 3
提问于2013-09-20
得票数 2
1
回答
截断命令(
配置
单元
与SQL)
mysql
、
sql
、
hadoop
、
truncate
、
hiveql
我期望
在
SQL和HIVE中有相同的truncate行为。但这不一样。我想确认一下我
是否
理解错了。mysql> truncate table t1;我发现
浏览 1
提问于2014-06-20
得票数 0
2
回答
配置
单元
外部表未显示
分区
hive
、
external
、
partition
Fetched: 17 row(s)hive> show partitions <dbname.tablename>;Time taken: 0.11 seconds 未显示
分区
当我看到hive.log时,表
中
的数据似乎根据“transactiondate”和“customerid”字段进行了适当的划分。单个节点的最大
分区
数是多少?我已经设置了1000个
分区
。-ext-10002/transactiondate=2015-01-16/customer
浏览 2
提问于2015-06-15
得票数 3
1
回答
如何在安装期间
更改
默认
分区
方案(partman )?
partitioning
、
system-installation
、
encryption
上一次我安装Ubuntu时,我使用usb实时运行它,并为默认的
分区
方案
更改
了partman的S
配置
。 这是获得完整磁盘加密的最简单方法,但是具有自定义
分区
大小
(更大的boot,没有swap)。另一种方法是使用gparted和
手动
配置
LUKS,这与
在
安装时简单地勾选"encrypt“设置是大相径庭的(有关所需的愚蠢步骤,请参见https://askubuntu.com/a/918030/4707
浏览 0
提问于2019-12-28
得票数 0
回答已采纳
1
回答
在
安装期间创建自定义
大小
的LVM
分区
(Debian)?
debian
、
partition
、
lvm
、
debian-installer
在
安装Debian (使用Debian 8,jessie)时,
是否
有一种简单的方法
可以
创建自定义
大小
的LVM
分区
?如果您使用引导
分区
,甚至接受它的有用选项来创建您经常想要的额外
分区
(例如,/home、/var、/tmp),那么似乎不可能(据我所知)
在
安装过程
中
更改
这些
分区
的
大小
,就像以前一样,它们最终将继续继续运行,并对磁盘进行真正的
分区</e
浏览 0
提问于2017-04-07
得票数 4
1
回答
如何在Hive 0.13
中
使用ALTER TABLE CHANGE COLUMN CASCADE
hive
、
hiveql
参考ALTER TABLE CHANGE COLUMN文档here,PARTITION子句
在
配置
单元
0.14
中
提供,CASCADE
在
配置
单元
1.1.0
中
提供
是否
可以
更新
配置
单元
0.13
中
所有
分区
的列类型
在
没有可用的
分区
或级联的情况下,我正在寻找针对Hive 0.13的变通方法 我想在
配置
<e
浏览 155
提问于2019-02-12
得票数 2
1
回答
树莓Pi 4 18.04 64位图像自动调整USB磁盘
18.04
、
partitioning
、
raspberrypi
、
usb-storage
、
arm64
但是,我希望重新划分这些磁盘,这样我就
可以
向集群
中
添加ceph。我尝试
手动
调整磁盘的
大小
,但是当磁盘重新连接到Pis并重新启动时,
分区
将自动增长到整个磁盘。
在
何处
配置
,
可以
禁用它,或者
是否
有一个进程来调整根
分区
的
大小
?
浏览 0
提问于2020-06-23
得票数 0
2
回答
Hive
中
的外部表
可以
智能地识别
分区
吗?
hadoop
、
hive
、
bigdata
每当我需要挂载
分区
时,我都需要运行它。有没有一种方法
可以
自动检测外部
配置
单元
表
中
的
分区
,而不是我
手动
执行 ALTER TABLE TableName ADD IF NOT EXISTS PARTITION()location 'locationpath
浏览 13
提问于2016-08-27
得票数 0
回答已采纳
3
回答
Spark
在
加载Hive表时创建了多少个
分区
apache-spark
、
hadoop
、
pyspark
、
apache-spark-sql
即使是Hive表或HDFS文件,当Spark读取数据并创建数据帧时,我认为RDD/dataframe
中
的
分区
数量将等于HDFS
中
的partfile数量。但是,当我使用
配置
单元
外部表进行测试时,我
可以
看到这个数量与数据帧中
分区
的部分文件数量.The数量119不同。该表是一个Hive
分区
表,其中包含150个部分文件,最小文件
大小
为30MB,最大
大小
为118MB。那么,是什么决定了
分区
的数量呢?
浏览 69
提问于2020-04-02
得票数 3
1
回答
Gobblin
中
的HDFS回看
配置
hadoop
、
hdfs
、
gobblin
我看到
配置
单元
到
配置
单元
的数据移动
在
Gobblin中有一个回看
配置
,我们
可以
在其中指定要复制的
分区
的日期 gobblin.data.management.copy.hive.filter.LookbackPartitionFilterGenerator
在
Gobblin
中
,HDFS到GCS (Google云存储)的数据复制
是否
有类似的回看
配置
,只能在特定
分区
日期之后
浏览 13
提问于2021-07-08
得票数 1
1
回答
Docker
中
的Kakfa
分区
docker
、
apache-kafka
、
partition
我想给它添加更多的
分区
。
可以
让我知道confluentinc/cp-kafka:5.3.2
中
是否
有
配置
或env来
更改
分区
大小
吗
浏览 0
提问于2020-02-14
得票数 0
3
回答
3WARE 9650-4LPML JBOD磁盘到RAID -1镜像迁移如何?
raid
、
mirror
、
migration
、
3ware
、
storage
可以
将单个磁盘迁移到Raid 1,如“用户指南”第122页表10所示:我试图找到最好的方法是将当前作为JBOD导出的磁盘迁移到具有第二个驱动器的RAID -1镜像
中
,而不破坏原始(jbod导出的)驱动器上的数据。
单元
0磁盘包含我的当前操作系统。我不能从3BM BIOS
配置
管理器迁移磁盘,因为我没有看到该选项。我需要访问3DM2或tw_cli来发出迁
浏览 0
提问于2012-02-28
得票数 0
回答已采纳
2
回答
如何将Windows 7加载程序添加到GRUB
中
?
grub2
、
windows-7
我成功地
在
Windows 7旁边安装了Ubuntu11.10。
在
安装过程
中
,我
手动
更改
了Windows
分区
大小
(使用了24 to,将虚拟
分区
大小
从100 to
更改
为40 to),并关闭了Windows存储系统恢复数据的150 to
分区
。我已经
在
第二个虚拟
分区
上安装了Ubuntu。 因此,现在当GRUB启动时,它无法看到Windows安装程序。我觉得windows加
浏览 0
提问于2011-11-09
得票数 12
1
回答
AWS Glue crawler -
分区
键类型
amazon-s3
、
amazon-athena
、
aws-glue
、
aws-glue-data-catalog
我使用以下
分区
键: s3://bucket/company=1123/date=20190207 一旦我执行了Glue爬虫
在
存储桶上运行,除了
分区
键的类型之外,一切都按预期工作。爬虫程序
在
目录中将它们
配置
为String类型,而不是int类型
是否
有定义
分区
键的默认类型的
配置
? 我知道以后
可以
手动
更改
它,并将爬行器
配置
设置为Add new co
浏览 13
提问于2019-02-07
得票数 11
回答已采纳
2
回答
手动
/分配
分区
情况下的kafka消费者重新平衡
apache-kafka
现在,我正在
手动
将
分区
分配给使用者。因此,根据文档,
在
消费者离开/崩溃的情况下,不会在消费者组中进行重新平衡。 假设在同一组中有3个
分区
和3个使用者,每个
分区
都
手动
分配给每个使用者。由于没有重新平衡,我
可以
采取哪些措施来确保最短的停机时间?我
是否
需要
更改
前两个
分区
中
的任何一个
分区
的
配置
才能从第三个
分区
或其他
分区
开始消费
浏览 0
提问于2019-02-12
得票数 0
3
回答
如何在Spark SQL
中
控制
分区
大小
apache-spark
、
hive
、
apache-spark-sql
、
partitioning
我需要使用Spark SQL HiveContext从
配置
单元
表加载数据并加载到HDFS
中
。默认情况下,DataFrame from SQL output有2个
分区
。为了获得更多的并行性,我需要SQL之外的更多
分区
。
在
HiveContext
中
没有重载方法来获取
分区
数参数。Starting task 1.0 in stage 131.0 (TID 298, aster1.
浏览 1
提问于2016-07-07
得票数 24
2
回答
具有Win 8 (UEFI)和Ubuntu (最新桌面版本)的双引导
分区
大小
installation
、
dual-boot
、
partitioning
、
13.04
如果我
在
我的硬盘上为Ubuntu创建一个
分区
,以便它
可以
与Win 8一起运行,那么以后
是否
可以
更改
该
分区
的
大小
?13.04的安装DVD
是否
附带了
分区
管理工具,以便我
可以
首先指定Ubuntu的
分区
大小
,然后
在
稍后的某个日期
更改
该
分区
的
大小
。例如,
在
我的硬盘驱动器大约630 GB
浏览 0
提问于2013-04-29
得票数 0
1
回答
用java
中
的hiveContext修复蜂箱表
hadoop
、
apache-spark
、
hive
、
apache-spark-sql
、
hivecontext
我想为
在
hive
中
手动
运行msck修复命令的任何新添加/删除的partitions.Instead修复
单元
表进行修复,有什么方法
可以
在
java
中
实现这一点吗?我正在尝试从hdfs和hive metastore.But
中
获取所有
分区
,然后比较它们之后会将新添加/删除的
分区
放到metastore.But
中
,我无法从hivecontext获得api。我尝试使用hivecontext获取
浏览 3
提问于2017-01-14
得票数 3
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
Linux-lvm逻辑卷管理
专为Windows电脑和服务器设计的磁盘管理软件
【技术】转让TDRSftware软件
Clickhouses数据迁移工具:Clickhouse-copier介绍
超级全面的MySQL优化面试解析
热门
标签
更多标签
云服务器
即时通信 IM
ICP备案
对象存储
实时音视频
活动推荐
运营活动
广告
关闭
领券