在presto中更新SQL表

文章/答案/技术大牛

发布

1回答

更新存储在亚马逊网络服务S3中的数据的模式/数据的策略

amazon-web-services、amazon-s3、aws-glue、amazon-athena

在我的组织中，我们使用亚马逊网络服务S3、和的堆栈来推动一些内部指标的报告。通常，这个堆栈非常适合用于报告原始数据(存储在S3中)的快速设置。我们遇到的问题是，如果我们发现需要以某种方式更新已经存储在S3中的数据，该怎么办。例如，我们希望更新具有特定字符串的列中的值，以更新该值。与数据库不同，我们不能只运行一个查询来更新所有现有数据。

浏览 0提问于2020-07-17得票数 1

1回答

sql、airflow、presto

因此，我尝试在Presto SQL中更新表的一个列的值；但是，在Presto文档中似乎没有更新查询，如下所示：WITHExpecting: '(', 'SELECT', 'TABLE', 'V

浏览 122提问于2019-08-14得票数 2

回答已采纳

1回答

如何查找上次更新记录的时间？

sql、hadoop、presto、trino

如何查找上次更新/插入表行的时间？Presto是ANSI-SQL兼容的，所以即使你不了解Presto，也许有一种通用的SQL方法可以为我指明正确的方向。我正在使用Hadoop。Presto查询比Hive更快。"Describe“只给出了列名。 https://prestosql.io/docs/current/

浏览 19提问于2019-06-11得票数 0

1回答

只从自动更新的联机sql数据库中获取新数据。

mysql、python

我有一个在线的MySQL (presto)数据库，它不断地自动更新(也就是说，新的行每天都会被添加到表中(确切地说，是视图)。我希望每天从它中获取数据，但不想重新获取我以前已经获取的数据。我使用python3从在线主机数据库中提取数据，如下所示：import numpy as npsql = 'select * from

浏览 0提问于2018-06-05得票数 2

回答已采纳

1回答

强制presto在目标数据库中执行sql片段(带有where条件的视图

presto

在Presto中，我正在编写一个SQL来从包含6个表的视图中提取数据。这些表都很大，记录在500万到3000万之间。SQL语句如下： selectfrom db.schema.v_order f_order_code in ( ) 我尝试从子查询中获取结果，并将子查询替换为内容，然后直接

浏览 57提问于2020-07-21得票数 0

回答已采纳

3回答

presto如何在presto执行hql之前显示分区？

hive、presto、trino

我使用pyhive连接hive使用Presto。在presto执行sql之前，我可以知道hive表的分区吗？

浏览 38提问于2017-03-24得票数 4

3回答

Presto和Hive

amazon-s3、presto

我正在尝试启用位于s3目录中的CSV文件的基本SQL查询。Presto看起来很适合(文件是10s GB)。当我在Presto中进行设置时，我尝试使用Hive连接器创建一个表。我不清楚是只需要hive metastore来保存我在Presto中的表配置，还是必须先在那里创建它们。文档表明，您可以使用Presto，而不必配置Hive，但使用Hive语法。这是准确的吗？

浏览 21提问于2017-02-11得票数 3

2回答

在Presto/Hive SQL上优化临时表

sql、hive、amazon-redshift、presto

我想优化在PRESTO/HIVE上运行的查询的计算时间。我在Redshift上使用的技术之一是提高临时表的效率，如下所示：CREATE TEMPORARY TABLE my_temp_table(;COMMIT; 我已经在Presto/

浏览 43提问于2020-10-16得票数 0

2回答

Presto SQL中的唯一行标识符

sql、amazon-athena、presto

我处理的是没有唯一行标识符的Presto SQL表。标识特定记录的唯一方法是查询其所有字段。在Presto中有没有某种隐藏字段，比如ROW_PRIMARY_KEY，它可以让我唯一地标识表中的记录？

浏览 36提问于2019-11-12得票数 1

回答已采纳

1回答

普雷斯托看不懂蜂巢上的阿夫罗桌

avro、amazon-emr、presto

我使用Presto 0.238.3，它是预装在EMR 6.2上。我有一些avro表，在Hive上我可以查询这个表，但是presto不能查询它们。我有以下例外我应该更新什么，在哪个地方更新，欢迎所有的指导。

浏览 4提问于2021-05-05得票数 0

3回答

在Spark中使用Presto时无法识别的连接属性“url”

apache-spark、apache-spark-sql、presto、presto-jdbc

下面是我的星星之火sql代码，在这里，我试图根据本指南读取一个预置表； .format("jdbc")at com.facebook.presto.jdbc.PrestoDriverUri.<init>(PrestoDriverUri.java:102

浏览 11提问于2021-08-30得票数 3

回答已采纳

2回答

将UDF函数插件到Presto的步骤是什么？

udf、presto

ran mvn compile和mvn package 下面是在Presto中运行我的UDF ('m

浏览 4提问于2017-02-28得票数 1

1回答

Presto无法获取配置单元表中的内容

hive、presto

我的环境: hadoop 1.0.4 hive 0.12 hbase 0.94.14 presto 0.56presto-metastore.db.filename=/rootdiscovery.uri=http://<HOSTNAME>:8081 在prestocli中，我可以成功地获取hi

浏览 2提问于2014-01-14得票数 3

0回答

如何在airbnb数据可视化工具超集中添加待连接的presto URI

sqlalchemy、uri、visualization、presto、superset

我有presto和superset的设置。。/app/hadoop/setjdk8.sh;bin/presto-cli --服务器 --目录配置单元--模式默认值并在hive表上用sql查询select count(*)测试ok。超集也设置在同一台服务器上，web UI可以访问。但是，当尝试对presto执行“添加数据库”操作时，总是无法连接到presto。SQL

浏览 6提问于2017-06-13得票数 3

1回答

无法从Qubole中的Presto连接ms sql服务器

sql-server、azure、presto、qubole

我在Microsoft上使用Qubole数据服务。我在Qubole创建了Presto集群。我想从Presto连接到，从读取数据。我已经在"/usr/lib/qubole/packages/presto-0.157/presto/plugin“上创建了sqlserver目录，这个路径并添加了以下jars: presto jdbc-com.facebook.presto

浏览 1提问于2017-12-15得票数 0

回答已采纳

1回答

如何在Hive生成的平面文件上运行特殊的SQL查询？

javascript、sql、hadoop、hive、hiveql

我们使用Hive分析日志数据，并将聚合结果存储在S3上的每日分区文本字段中(让我们称它们为“粗”聚合)。为了简单起见，我也想在这里使用SQL查询。我想知道对于这类问题有什么最佳做法？ A)我们可以在蜂巢中生成所有的“细粒度”聚合。然而，在蜂巢中对这些小数据集进行操作需要很长时间。B)我们可以在S3和Javascript之间引入一个“快速访问层”，可以运行S3查询。您推荐什么样的查询引擎？

浏览 1提问于2015-05-04得票数 3

1回答

Spark/SQL2.4校验和()、md5等

apache-spark、amazon-athena、presto

查询在AWS 雅典娜/Presto中工作，并为一组行生成一个校验和，以便我能够确定是否有任何数据已经更改，或者将一个表中的一组行与另一个表中的一组行进行比较，以实现行集相等/不平等。样本输出为1行/col，即f5 09 49 03 a6 26 fd 5e 遗憾的是，上面的SQL不适用于/SQL2.4(截至2019年3月的最新版本)。在Spark中运行相同的语句

浏览 3提问于2019-03-21得票数 7

1回答

如何在Presto中不使用唯一键进行全局排序

sql-order-by、presto、row-number、deterministic、non-deterministic

在我的例子中，我有一些单元表，分区列(Dt)是每个表中唯一包含的列。我在hive中执行下面的sqlSELECT row_number() over(ORDER BY T.dt) as row_num,T.* FROM 是否可以在<

浏览 3提问于2021-11-30得票数 1

回答已采纳

1回答

用于Presto查询的简单批处理脚本

bash、presto

我正在运行一个bash脚本，通过presto从表中提取数据...此命令将成功提取表结果并将其发送到audit.dat文件。我要找的是替换SQL节，并在&#

浏览 1提问于2018-08-20得票数 5

1回答

Presto Superset查询无法找到新存储帐户的配置属性

presto、azure-hdinsight、apache-superset、azure-data-lake-gen2、azure-storage-account

我们有一个Azure HDInsight集群设置，运行Presto和Superset应用程序连接到它。最近，我们通过更新core-site.xml将一个新的存储帐户加载到集群中，这允许我们从Hive创建一个外部表。我们能够从Hive视图中的新存储帐户中查询外部表，而不会出现问题。在Superset应用程序中，我们能够找到外部表，并且可以在没有问题的情况下看到表模式。但是当试图通过Prest

浏览 2提问于2021-09-15得票数 0

回答已采纳

点击加载更多

更新存储在亚马逊网络服务S3中的数据的模式/数据的策略