腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
将
presto
与
airflow
集成
、
、
我想把
Airflow
和
presto
结合起来。在bash shell上,命令- */opt/
presto
/bin/
presto
--server 10.0.0.15:8190 --catalog hive --schema cvm_db --execute"select * from cvm_db.cvm_weekly_rech limit 10"*运行良好,但在python
airflow
脚本中,它会抛出错误- invalid sythax并突出
浏览 37
提问于2020-01-14
得票数 0
1
回答
如何连接到PySpark中的
Presto
?
、
、
、
、
我想在PySpark中使用JDBC连接到
Presto
服务器。我遵循了一个用Java编写的。No suitable driverjdbcDF = spark.read \ .option("url", "jdbc:
presto
://my_machine_ip:8080/hive/default") \ .option("user", "
air
浏览 1
提问于2019-06-28
得票数 2
回答已采纳
1
回答
Presto
中的更新函数
、
、
我在一年前的文章()中看到,
Presto
不支持update语句。这一切都变了吗?是否有其他方法来实现现有表中现有记录的update语句?
浏览 5
提问于2022-02-23
得票数 0
1
回答
使用azure blob存储设置DAGS和插件
、
、
是否有办法
将
airflow
配置为
与
microsoft azure blob storage for DAGS and PLUGINS文件夹对话 对于芹菜模式,希望将它们存储在BLOB存储中,而不是本地共享文件夹中
Airflow
版本: 1.10.0 配置类型: celery executor //Directory for log storage.
airflow
_logs_dir: "/var/log/
airflow
"
浏览 9
提问于2019-09-04
得票数 0
2
回答
作为气流用户运行气流处理和气流网络服务器
、
、
、
Problem:我正在GCP上设置一个Google,其中安装了
airflow
。我现在正试图通过遵循关于
airflow
的说明将systemd
与
集成
起来,但是它说明了一个假设,即气流将在
airflow
:
airflow
下运行。如何设置气流安装,以便每当VM上的任何用户从外壳运行
airflow
时,后端都会以
airflow
用户的身份运行。它类似于在hive用户下运行的单元进程。 虚拟机上的OS : CentOS 7
浏览 4
提问于2017-11-14
得票数 2
1
回答
如何
将
Airflow
与
IA平台连接起来?
、
我在一个项目中,我需要将
Airflow
连接到IA平台(人工智能谷歌云)。有没有我可以使用的连接器?我也需要从那里开始一份工作。谢谢。
浏览 1
提问于2020-01-13
得票数 0
1
回答
执行
Presto
查询时出现SqlStageExecution错误
、
、
我正尝试在亚马逊上运行
Presto
。我只在一个节点上配置了
Presto
服务器。我还没有在集群中的其他节点上设置
Presto
。尝试执行简单的select查询会抛出以下异常。有什么见解吗。这是因为
Presto
仅在一个节点上配置(协调器)。错误在下面 com.facebook.
presto
.execution.SqlStageExecution Error while starting stage 20131113_180914_00005com.google.common.base.Throwables.pr
浏览 2
提问于2013-11-14
得票数 1
2
回答
支持Contrib操作符的
Airflow
2.0
我使用了Lambda Hook和
Airflow
v1.10.11,它在contrib部分下。在2.0版本中,有人可以建议如何使用Lambda钩子吗?我现在也不能访问气流链接。() 链接:
Airflow
2.0支持的挂钩:
浏览 0
提问于2020-12-22
得票数 1
1
回答
Airflow
+ Sentry -无来自dags/任务的信息
、
我使用的是最新版本的
airflow
(从1.10.6版开始,sentry
与
airflow
集成
在一起)。但是,我无法获得有关dag或任务状态的任何信息。在本例中,我使用了SequentialExecutorfrom
airflow
.operators.python_operator import PythonOperatorfrom
airflow
.utils.trigger_rule import TriggerRule
浏览 0
提问于2020-05-20
得票数 1
2
回答
使用Google Autentication的
Airflow
、
目前,我正在尝试
将
airflow
与
google身份验证进行
集成
。我错过了什么吗?还需要其他配置吗?谢谢你,玛丽亚
浏览 26
提问于2018-01-17
得票数 7
1
回答
Presto
与
MSSQL的
集成
、
、
其思想是开始
集成
文件的和MSSQL,这是我的知识领域。不幸的是,由于这是一个相对较新的领域,我只找到了Facebook页面或
Presto
.io页面,但是对于那些想从零开始了解大数据世界的人来说,这还不够好。 我
将
感谢你在这方面的帮助和/或指导。
浏览 4
提问于2016-09-11
得票数 0
1
回答
Apache
Airflow
持续
集成
工作流和依赖项管理
、
我正在考虑开始在一个项目中使用Apache
airflow
,并且想知道人们如何管理
与
Airflow
的持续
集成
和依赖。更具体地说,我有以下设置我有两个python DAG,我想把它们的源代码放在不同的仓库中。另外,我如何管理
将
这两个Dags的代码持续
集成
到每个不同的
Airflow
环境中(dev,staging,Prod)(我只是让jenkins或其他东西ssh到
airf
浏览 6
提问于2017-07-10
得票数 6
2
回答
Apache
Airflow
与
Google cloud pubsub的
集成
、
、
我是
airflow
的新手,正在尝试使用apache
airflow
与
google pubsub的
集成
,我猜这是在"
Airflow
-300“JIRA下添加的。如果我读错了,请纠正我。我们正在考虑在Google Cloud Storage上添加通知,在发生任何文件事件时,我们希望在
Airflow
中触发一些工作流。任何建议都将不胜感激。
浏览 0
提问于2017-09-01
得票数 6
1
回答
ServiceNow
与
Airflow
的
集成
、
、
、
我们可以
将
ServiceNow
与
Airflow
集成
在一起吗?我的意思是,如果出现任何DAG故障,我们是否可以通过提交ServiceNow请求来重新运行故障的DAG/任务?
浏览 25
提问于2019-08-09
得票数 2
2
回答
如何在系统中使用气流调度器?
通常,我用
airflow
scheduler -D手动启动它,但有时当我没有时间时它就停止了。
airflow
airflow
.conf气流安装在:我有以下途径
将
airflow
.conf复制到/etc/tmpfiles.d/ 什么是tmpfi
浏览 0
提问于2018-10-23
得票数 10
2
回答
如何
将
多个数据库添加到一个
Presto
目录?
、
、
我使用的是
Presto
版本0.216,我想在一个目录文件中连接多个数据库。我正在使用Apache SuperSet通过
presto
运行查询,它迫使我转到一个名为hive.properties的目录。 我在AWS的一个Ubuntu实例上运行
Presto
。然而,如上所述,这不是superset
与
presto
集成
的方式。 在
presto
文档中,它说我可以运行一个命令,通过连接器名称here对数据库进行分组。我只想通过
Presto
从Apache SuperSe
浏览 58
提问于2019-02-09
得票数 0
回答已采纳
1
回答
如何在Iframe中设置web资源的域
、
、
、
我目前正在
将
apache
airflow
(flask应用程序)
与
身份验证服务
集成
为微应用程序。身份验证服务在Iframe中加载气流。我能够在身份验证服务ui的Iframe中加载
airflow
的登录页面。 登录页面又包含css和其他外部资源。如何强制从特定位置加载它们。我目前有一个
airflow
登录页面,它呈现包含css依赖项的html,如下所示。我想要的是通过身份验证服务域加载的资源,像这样的authentictaion_domain.com/my-microapp/
浏览 0
提问于2018-06-21
得票数 0
3
回答
如何
将
Apache
Airflow
与
slack
集成
?
、
谁能给我一步一步手册,如何连接Apache
Airflow
到松弛工作区。我创建了到我的频道的webhook,接下来我应该怎么做? 亲切的问候
浏览 6
提问于2018-08-28
得票数 16
回答已采纳
1
回答
气流自定义传感器: AttributeError:“NoneType”对象没有属性“get_records”
/
airflow
/dags while not self.poke(context): File "/home/
airflow</
浏览 1
提问于2019-04-09
得票数 0
1
回答
气流DAG在通过RecursionError触发时会与WebUI爆炸
有趣的是,一旦发生这种情况,直到我通过UI
将
DAG标记为失败之前,我开始在/logs/scheduler/latest/<path/to/my/dag_script.py.log>上得到以下堆栈跟踪(显然是从抛出的)[2019-12-24 06:27:32,851] {jobs.py:1446} INFO - Processing derived_tables_
presto
_cbot_events_1[2019-12-24 06:27:32,855] {jobs.p
浏览 2
提问于2019-12-24
得票数 0
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
将Hyperledger Fabric与IOTA Tangle 集成
如何将外部数据源与Spark集成?
PancakeSwap与Aptos集成,将部署其原生Token CAKE
Arkham与Wormhole达成合作,地址标签将集成至Wormholescan
谷歌:生成式AI模型将很快与搜索结果集成
热门
标签
更多标签
云服务器
ICP备案
实时音视频
即时通信 IM
对象存储
活动推荐
运营活动
广告
关闭
领券