1回答
我正在尝试使用用户名/密码/jdbc url查询PySpark中的远程配置单元元存储区。我可以很好地初始化SparkSession，但无法实际查询表。from pyspark.sql import SparkSession
url = f"jdbc:hive2://{jdbcHostname}:{jdbcPort}/{jdbcDatabase}"org.apach
浏览 14提问于2020-09-28得票数 0
2回答
-本地或远程
、、
2.hive-site.xml文件，我可以在CDH4.2的WebUI中查看 <value>org.postgresql.Driver</value>我认为它是在本地模式下运行的，因为WebUI还声明配置单<em
浏览 6提问于2013-05-08得票数 0
1回答
我想配置Presto在亚马逊网络服务S3中查询ORC文件。根据文档，必须配置配置单元元存储区。这个元存储区将收集所有表的模式。由于我有现有的ORC文件，有没有办法用应该嵌入到ORC文件中的现有表的方案自动填充此元存储？
提前感谢您的帮助！
浏览 20提问于2021-05-05得票数 0
我用"Org.apache.hadoop.hive.ql.io.parquet.serde.MapredParquetInputFormat“格式创建了我的配置单元外部表，输出格式："Org.apache.hadoop.hive.ql.io.parquet.serde.MapredParquetOutputFormat如何使用Pyspark从hdfs读取这些配置单元表文件？
浏览 35提问于2021-07-09得票数 0
1回答
我刚接触Apache drill.While，正在为Apache have创建存储插件。我遇到了错误。我已经尝试了两个ways.Below。
浏览 16提问于2016-07-25得票数 0
回答已采纳
我正在尝试从安装在本地计算机上的Intellij中的spark程序中连接到远程配置单元。我将hadoop集群配置文件放在本地机器上，并在Intellij运行此spark程序的配置中配置了环境变量HADOOP_CONF_DIR，以便能够检测此hadoop集群，但intelliJ不知何故无法读取这些文件，并且spark程序默认为本地配置单元元存储实例。有没有办法将intelliJ配置为在本地读取hadoop配置<
浏览 3提问于2018-02-14得票数 0
Delta Lake在哪里存储表元数据信息。我在我的独立机器上使用的是spark 2.6(不是Databricks)。
浏览 31提问于2020-07-21得票数 1
回答已采纳
在使用hive3的Hortonworks HDP3集群上通过Tez执行insert..select查询时，我得到以下错误：配置单元元存储区配置为使用PostgreSQL数据库
浏览 58提问于2019-07-05得票数 0
回答已采纳
1回答
我在Drill中设置了以下存储插件： "type": "hive", "configProps": {Hive metastore服务器现在与Drill相同。表中只有不到20,000条记录。
浏览 2提问于2015-11-11得票数 1
1回答
我们希望使用VictoriaMetric作为存储数据库，用于从普罗米修斯收集的时间序列数据。但是据说只支持写模式下的集成，而不是读模式。Prometheus是否会停止将收集到的数据存储在文件系统中，并且只在我们指定远程写配置时使用远程存储？或者收集到的数据仍然可以从文件系统中获得，我们可以从Prometheus收集实时数据，如果我们需要具有历史意义的长期数据，我们必须查询DB本身？
浏览 8提问于2020-09-08得票数 2
回答已采纳
3回答
是否存在仅列出特定数据库中可用视图的配置单元查询。在MySql中，我认为查询如下：
SELECT TABLE_NAME FROM information_schema.TABLES WHERE TABLE_TYPE LIKE 'VIEW' AND TABLE_SCHEMA
浏览 3提问于2014-03-10得票数 4
回答已采纳
1回答
我安装了本地hadoop单节点和配置单元，并将一些配置单元表存储在hdfs中。然后，我使用MySQL元存储区配置配置单元。现在我安装了spark，我正在对hive表进行一些查询，就像这样(在scala中)：result = hiveContext.sql("SELECT * FROM USERS&
浏览 2提问于2016-04-04得票数 2
1回答
我有一个两个节点的hadoop集群，一个主节点和一个从节点。我现在需要安装Hive。是否必须只在主节点上安装？或者我可以把它安装在从机上？
浏览 2提问于2014-03-03得票数 0
我们使用蜂窝和PySpark select * from EX """.format()
creat
浏览 0提问于2019-04-18得票数 0
另外，在pyspark中运行sql查询会抛出以下错误：format with the我的metastore版本是1.2.1(在spark-default中指定)有人能帮帮忙吗。在pyspark中，我能够在hadoop中读取文件，并且Hive工作正常(在cli中检查)。
请提供有关在spark
浏览 5提问于2016-09-01得票数 3
1回答
我正尝试在亚马逊S3存储桶上使用Presto，但在互联网上找不到太多相关信息。
我已经在一个微型实例上安装了Presto，但是我不知道如何连接到S3。有一个存储桶，里面有文件。我有一个正在运行的配置单元元存储服务器，并且我已经在presto hive.properties中对其进行了配置。但是当我尝试在hive中运行LOCATION命令时，它不起作用。
浏览 2提问于2016-05-09得票数 7
我试图从Python中查询snappydata，一些答案在StackOverflow中说Python不能连接到远程spark集群。谁能帮助我如何连接到snappydata集群，并让一个简单的查询工作？我正在尝试的代码- from pyspark.sql.snappy import SnappySession
snappy = SnappySession.builder.appName("test")但是，我已经将我的环境配置为在本地运行PySpark
浏览 19提问于2020-07-18得票数 0
2回答
我有一个外部蜂窝表，存储为Parquet，分区在一个列上，比如as_of_dt，数据通过spark streaming插入。现在，每天都会添加新的分区。我正在执行msck repair table，以便配置单元元存储获得新添加的分区信息。这是唯一的办法，还是有更好的办法？我担心如果下游用户查询表，msck repair是否会导致数据不可用或数据陈旧的问题？我正在浏览HiveContext应用程序接口并查看refreshTable选项。
浏览 8提问于2018-08-07得票数 13
我可以看到wireshark实际查询了url '/apps/crm_organizations/orgtype/‘。但是，组合框不会显示任何值。这和我懒惰加载combobox有什么关系吗？
浏览 0提问于2012-07-24得票数 1
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
腾讯会议
云直播
对象存储活动推荐
腾讯云开发者
