HiveQL -分组计数

文章/答案/技术大牛

发布

1回答

hive、count、grouping、hiveql

我是个新手，在HiveQL上还面临着很多问题，需要和大家商量一下。我有一个名为Vote Table的表格，我想计算A、B、C、D的赞成票(对不起，我无法发布图片，所以我将其作为链接发送)。

浏览 15提问于2020-03-02得票数 2

回答已采纳

1回答

如何统计基于两个分组变量的相同聚类的观测值数量？

sql、hive、hiveql

在HiveQL中，如何根据group1和group2计算具有相同分组的id的数量| id1 | group1 | group2 | +-----+-我曾尝试使用子查询在HiveQL中对此进行编码，但没有成功。如有任何提示，我们将不胜感激。

浏览 4提问于2016-10-15得票数 0

1回答

能实现什么？

hadoop、hive、hbase

分组将发生在数据流的洗牌和分区阶段。对吗？在Hadoop之上有Hive，MR代码将由HiveQL过程引擎生成。因此，从编码的角度来看，使用Java的MR编码将逐渐被高级HiveQL所取代。这是真的吗？

浏览 3提问于2015-11-12得票数 0

回答已采纳

1回答

按语句分组HiveQL

hadoop、hive、hiveql

我是蜂巢的鼻涕虫。我的问题是，为什么我们在执行组时需要使用collect_set(col)？会很感激你的帮助。提前感谢！

浏览 1提问于2015-05-13得票数 0

回答已采纳

4回答

组中第一值

sql、hiveql

我希望根据组中的第一个(实际上，仅)值在group by表中设置一个列。id good1 t3 tid multiplicity goodN2 1 0其中goodN为1当且仅当multiplicity为1，good为t if (count(*) > 1, 0, if(good =

浏览 6提问于2014-03-10得票数 1

回答已采纳

1回答

将非Java蜂巢的输出转换为映射

python、hive、user-defined-functions、hiveql

STRING,FLOAT>) python脚本将vtype和一些统计数据我遇到的问题是，我无法确定如何格式化定义stats映射的字段，以便HiveQL可以将其转换为在查询中定义的映射。无论我试过什么，我在统计领域都得到了这样的结果：在上面的示例中，我尝试将其返回为JSON，HiveQL将其解释为key，并将null设置为值。

浏览 1提问于2016-10-25得票数 1

回答已采纳

1回答

Hiveql聚合:两个值之间的差异

hive、hiveql

我正在使用hive和hadoop.我正在寻找一个函数(hiveql)，它允许每个资源名的day.The数据每5分钟(仪表或计数器)记录的最后/第一个值之间存在差异，并且我希望每个资源名(mac)每天都有一个值的聚合

浏览 1提问于2017-08-17得票数 1

1回答

我想根据会话ids的出现次数对它们进行排名，因此第一次出现的次数是1，第二次是2，第三次是3，依此类推。我收到一个语法错误，所以很可能是有问题 select rank() over (partition by conversationid order by count(*) desc) as rnk group by conversationid 编译语句时出错:失败: SemanticException无法将窗口调用分解为组。至少一个组必须仅依赖于输入列。还要检查循环依赖关系。基本错误: org.ap

浏览 24提问于2020-10-07得票数 0

1回答

有哪些HiveQL可以限制，而SQL不能呢？

sql、hiveql

我计划从HiveQL迁移到SQL，但我不知道这两种语言之间的限制或关注点。我知道从SQL到HiveQL有一些限制。例如，1:SQL可以按一个"FROM“语句设置两个或多个表，但HiveQL不能。2:SQL可以按列排序，列不是"SELECT"，但HiveQL不能。3:SQL可以在"WHERE”语句中使用" in“，但HiveQL不能。等等。我想知道的是，当HiveQL迁移到SQL时，是否存在任何存储点或关注点。我做了一些研究，但没有找到。

浏览 5提问于2022-07-12得票数 0

3回答

SQL to HiveQL生成器

sql、hadoop、hive、hiveql

有没有办法把我的SQL查询转换成Hive查询，或者有什么开源工具或者项目可以帮我把一些SQL查询转换成HiveQL，这样我就可以从Hadoop数据库中查询开始我的开发了？

浏览 2提问于2013-04-12得票数 2

1回答

将配置单元行分组到此行的数组中

hive、hiveql

我有一个类似下表的表格：JohnDoe JohnRoger RogerUser:String Alias:array<String>Roger [Roger] 我不知道如何使用HiveQL.Do

浏览 0提问于2013-05-30得票数 9

回答已采纳

1回答

hiveQL计数器超过误差

hiveql

我正在Hiveql中运行create查询，并在运行时获得以下错误：我试图将计数器设置为更大的数目，即设置tez.counters.max=16000；然而，它仍然由于同样的错误而倒下。

浏览 2提问于2017-04-12得票数 0

1回答

不一致的蜂巢左联接结果

sql、hadoop、hive、hiveql、impala

我组成了一个简单的退出连接的hiveql select * from a left outer join b on (a.f1=b.f1 and a.f2=b.f2)，上面查询结果的总数是798,608我甚至尝试用几条记录创建两个小表(a‘和b')，左连接结果的计数与表a’记录的计数如出一辙。结果不一致的原因是什么？

浏览 1提问于2017-05-02得票数 0

回答已采纳

2回答

特定场景的单元查询

hadoop、hive、hiveql

本质上，我想要col1、col2、col3和col4列中的值之和，并将这些值分组。“id”列在这里是不相关的，但提供了示例。谢谢。

浏览 4提问于2015-03-27得票数 0

回答已采纳

1回答

配置单元-检查表的每一行中的数组是否包含另一个表中的列中的任何匹配数据

sql、hadoop、hive、bigdata、hiveql

Posts:user2 bigdata, hadoop, query, hiveqlhadoophiveqluser2 bigdata, hadoop, query, hiveql user1 hive, hiveql, help

浏览 5提问于2014-01-28得票数 6

1回答

星火虫的蜂巢查询-解析失败

scala、hadoop、hive、apache-spark、hiveql

(sc)第二行无法执行以下消息：警告:有1次反对警告；org.apache.spark.sql.hive.HiveQl:50) at org.apache.spark.sql.hive.ExtendedHiveQlParser$$anonfun$hiveQl$1.apply(ExtendedHiveQlParser.scala:50) at org.apache.spark.sql.hive.ExtendedHiveQlParser$$anonf

浏览 3提问于2015-02-25得票数 1

回答已采纳

1回答

HiveQL中的变量

variables、hive、hiveql、azure-data-factory、azure-hdinsight

背景：作为现代化工作的一部分，我正在尝试将一个大的存储过程转换为HiveQL脚本。HiveQL脚本作为配置单元活动的一部分，无论何时从Azure数据工厂触发管道，都会在Azure HDInsight集群上运行。我尝试转换的存储过程有很多使用'DECLARE‘语句声明的变量。我如何在HiveQL中做同样的事情？有没有办法在HiveQL脚本中声明、修改和使用变量？

浏览 19提问于2019-10-11得票数 1

1回答

蜂箱/HiveQL获取最大计数

hadoop、hive、hiveql、apache-hive

from weather order by cnt desclimit 1; 目前这个查询工作，但是它输出所有计数，我只对每种类型的风向计数感兴趣，它输出南方和输出170000，但答案只有10,000。我知道计数的使用方式有问题，我认为它必须指定别名并通过特定的wind_direction进行计数，但我不能将其转换为语法。

浏览 4提问于2016-04-21得票数 0

回答已采纳

2回答

多连接的HiveQL查询

sql、join、hive、hiveql

我试图为联接实现一个简单的HiveQL查询。但是，由于缺乏HiveQl方面的知识，以及与HiveQL相关的互联网上可用资源少得令人惊讶，我不得不构建一个简单的查询，在常规SQL中只需几秒钟。C,Table4 DA.playerid = B.playeridA.playerid = C.playeridA.playerid = D.playerid 我想在HiveQL我知道如何使用HiveQL语句连接JOIN ON中的两个表，但是连接许多表是很困难的。

浏览 3提问于2014-04-18得票数 0

回答已采纳

1回答

如何在配置单元中按输出输出多个group

sql、hadoop、hive、apache-pig

我需要做多次计数和group by，我在hive中尝试了这一点，但它的错误出来了，任何擅长hiveQL的人都可以在这里提供帮助，如何在hive/pig中做同样的事情Select col1,clo2 ,col3 , count (distinct col4, col5) from table1 where col6 = 1 group by col1,clo2 ,col3 第二次计数的逻辑

浏览 0提问于2014-04-04得票数 0

点击加载更多