腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
圈层
工具
MCP广场
文章/答案/技术大牛
搜索
搜索
关闭
发布
文章
问答
(9999+)
视频
沙龙
0
回答
如何
从
spark
1.6连
接到
bigsql
、
、
、
、
我在云4.1,Ambari 2.2.0和
Spark
1.6.1上使用BigInsigths,连接是scala还是python都没关系,但我需要用
spark
做数据处理,然后在
BigSql
中持久化它。
浏览 11
提问于2017-06-10
得票数 0
1
回答
使用Python通过Java连接
BigSQL
、
、
我正在尝试将python连
接到
BigSQL
。我有一个java代码,可以将python连
接到
BigSQL
&
从
BigSQL
.Below检索数据是我的示例代码。com.ibm.db2.jcc.DB2Driver"); System.out.println("Connected to
BigSQL
浏览 7
提问于2017-05-04
得票数 0
回答已采纳
1
回答
如何
以编程方式获得
BIGSQL
_HEAD的主机名?
、
我需要从脚本中以编程方式检索云企业集群上BigInsihgts的BigInsihgts主机名,以便能够自动连
接到
该主机。
BIGSQL
_HEAD主机名在Ambari中--
如何
使用“标准”unix检索此信息?
浏览 2
提问于2016-07-20
得票数 0
回答已采纳
1
回答
如何
将拆分的HDFS文件加载到Oracle数据库?
、
、
我需要将数据
从
HDFS上的拆分文件加载到Oracle数据库。ls Found 18 items drwxrwxrwx -
bigsql
hdfs://XXXXXX/split_files/test_folder/test_table_with_partitions/tm=2017-07-24/d
浏览 5
提问于2017-07-26
得票数 0
回答已采纳
1
回答
在
spark
中使用下推查询,
如何
在
spark
-HBASE (
BIGSQL
作为SQL引擎)中获得并行性?
、
、
、
、
在
Spark
中,PushdownQuery由数据库的SQL引擎进行处理,并根据处理结果构造数据框架。因此,
spark
查询该查询的结果。"driver", driver).option("partitionColumn", "COUNTRY_CODE")我可以
从
spark
SELECT DISTINCT(FLIGHT_NUMBER) blah blah blah WHERE
浏览 6
提问于2018-08-23
得票数 0
回答已采纳
1
回答
Spark
到不带
Spark
SQL的HCatalog
、
、
、
如何
不使用
Spark
SQL
从
Spark
Job连
接到
HCatalog。 我们使用的是Cloudera发行版的
Spark
,因为他们目前还不支持
Spark
SQL。有没有其他方法可以让我们
从
Spark
Job连
接到
o HCatalog?
浏览 3
提问于2015-08-19
得票数 1
1
回答
LNK1104无法打开文件'libpq.lib‘
、
我正在尝试
从
我的Visual C++项目连
接到
windows postgresql数据库。我从这里下载了9.5.9的
BigSQL
图形化安装程序:C/C++ ->常规->附加包含目录 链接器我该
如何
解决这个问题呢?
浏览 1
提问于2017-09-30
得票数 1
1
回答
Hive/
Bigsql
pandas浮点型转换为带空值的整数,并使用pyarrow将其转换为拼图文件
、
、
、
、
我对熊猫、pyarrow和
bigsql
有意见。基本上,我想要读取csv,写入拼接,并从数据库读取拼接。但从db读取文件时出现问题。Pandas dtype和db数据类型不同。在
bigsql
中创建的表如下所示: id bigint ,) allow_trun
浏览 27
提问于2021-03-06
得票数 0
0
回答
如何
将
Spark
Streaming连
接到
windows上的独立Solr?
、
、
我想将
Spark
Streaming与独立的Solr集成在一起。我在没有Zookeeper配置的windows上使用
Spark
1.6.1和Solr 5.2 standalone。我能够找到一些解决方案,通过传递Zookeeper配置,他们可以
从
spark
连
接到
Solr。
如何
将我的
spark
程序连
接到
独立的Solr?
浏览 3
提问于2017-01-02
得票数 0
2
回答
连
接到
配置单元时使用
Spark
启动
、
、
、
我正在尝试
从
独立的
Spark
连
接到
Hive(hadoop集群具有kerberos身份验证)。 有没有人可以让我知道
如何
在
spark
程序中做kinit,我可以连
接到
hive?更新:我的
Spark
与Hadoop在不同的集群上
浏览 4
提问于2017-05-02
得票数 2
1
回答
Python中的
Spark
cassandra连接器
、
、
、
我需要用python将我的独立
Spark
连
接到
我的Cassandra实例。我已经从下载了Apache
spark
,解压并构建如下:sbt/sbt assembly
如何
将
Spark
连
接到
Cassandra实例以访问作为
Spark<
浏览 2
提问于2016-04-12
得票数 1
1
回答
用纱线客户端代替livy的Sagemaker笔记本到EMR火花源
、
、
、
我知道,关于
如何
通过SparkMagic预装的内核将Sagemaker笔记本连
接到
EMR集群上,有很好的教程,但是我们希望使用纱线-客户端模式(而不是livy )连
接到
集群,以便能够使用我们已经拥有的Sagemaker在云/ AWS之前,我们使用了内部/自定义的前提设置( hadoop/
spark
集群和jupyter实验室),我们使用了该设置,因此我们知道这是可能的,只是不知道
如何
在AWS和EMR/sagemaker在我们的办公室里,我们会做如下代码(写在笔记本上)
浏览 8
提问于2022-06-13
得票数 0
3
回答
将火花连
接到
远程火花连接。
、
、
我想将本地桌面RStudio会话通过sparklyr连
接到
远程
spark
会话。有人能说明
如何
建立这种联系吗?我不知道
如何
创造这方面的可复制的例子,但总的来说,我想做的是:sc <-
spark
_connect(master = "
spark
://ip-[MY_PRIVATE_IP]:7077",
spark
_home = "/home/ubuntu/
浏览 6
提问于2016-09-30
得票数 8
回答已采纳
1
回答
Apache光束
Spark
便携Runner
python "SaiStudy - Apache-Beam-
Spark
.py“--runner=PortableRunner --job_endpoint=192.168.99.102:8099 我的
Spark
在Docker Container上运行,我可以看到JobService正在以8099的速度运行。_MultiThreadedRendezvous:已终止的RPC的状态:<_MultiThreadedRendezvous = StatusCode.UNAVAILABLE details =“无法连
接到
所有地址clie
浏览 16
提问于2020-10-24
得票数 0
0
回答
如何
从
本地提交
spark
Job并连
接到
Cassandra集群
、
、
谁能让我知道
如何
从
本地提交
spark
Job并连
接到
Cassandra集群。目前,我正在通过putty登录到Cassandra节点后提交
Spark
作业,并提交以下dse-
spark
-submit job命令。命令:dse
spark
-submit --class ***** --total-executor-cores 6 --executor-memory 2G **/**/**.jar --config-filebuild/job.co
浏览 8
提问于2016-12-23
得票数 0
1
回答
建立电火花会话面临的问题
、
、
from pyspark.sql import SparkSession .builder \ .builder \ .config("
spark
.jars", "postgresql-42.2.5.jar") \ .getOrCr
浏览 8
提问于2022-08-05
得票数 0
2
回答
在哪个版本的HBase中集成了
spark
API?
、
我阅读了
spark
和hbase的文档: 我很困惑,为什么apidocs和HBase版本不匹配?我的目标是使用
Spark
和HBase (bulkGet,bulkPut..etc)。我
如何
知道这些函数是在哪个HBase版本中实现的? 如果有人有关于这方面的补充文档,那就太棒了。
浏览 5
提问于2015-12-03
得票数 5
1
回答
如何
从
PHP应用程序连
接到
spark
?
、
如何
从
php应用程序连
接到
spark
集群?我们希望运行
spark
sql查询并在网页中显示输出。对此有什么建议吗?
浏览 1
提问于2016-06-02
得票数 0
1
回答
从
PyCharm连
接到
正在运行的
Spark
-Session
、
、
、
我目前正在尝试建立我的
spark
环境,并想知道最佳实践是什么。我想用Pycharm编写代码,然后从那里执行它。
如何
从
本地连
接到
已经在运行
Spark
-Session的本地(在我的Mac上)?到目前为止,我的想法是在终端中启动一个pyspark-shell,如果我在Pycharm中运行我的代码,它应该连
接到
正在运行的
Spark
-Session。提前感谢!
浏览 1
提问于2019-03-20
得票数 0
1
回答
如何
使用所有snappydata集群服务器启动
spark
-shell?
我似乎找不到一种使用conf/servers中设置的所有服务器启动shell的方法谢谢,
浏览 1
提问于2016-03-22
得票数 0
点击加载更多
热门
标签
更多标签
云服务器
ICP备案
腾讯会议
云直播
对象存储
活动推荐
运营活动
广告
关闭
领券