我们在blob中的Azure存储帐户中存储了python脚本。我们希望在azure databricks集群中部署/创建此python脚本(作为notebook)，以便稍后我们可以运行Azure数据工厂管道，并且管道可以执行在databricks中创建/部署的notebook我们只希望在blob中可用时创建/部署此脚本一次。
我试着在网上搜索，但找不到
浏览 21提问于2021-05-28得票数 1
我们有一个托管在私有bitbucket存储库上的自定义python包，它可以通过%pip install git+https//...安装在任何databricks笔记本电脑上。当函数在本地运行时，这是通过配置文件处理的，但如果函数在databricks上运行，我们希望将这些凭据存储在databricks secret (作用域)中。To obtain such a token, you can run the f
浏览 22提问于2021-04-14得票数 0
2回答
我希望执行以下命令或任何类似的命令，这些命令允许我创建MyClass实例在数据库的之后，我在本地开发了一个包含单个模块的python包，如下所示：|- __init__.py|- mymodule.py我试过以
浏览 0提问于2019-09-18得票数 6
回答已采纳
1回答
我正在使用databricks -cli在databricks中创建一个新的工作： "num_workers": 3, "PYSPARK_PYTHON": "
浏览 0提问于2018-07-11得票数 3
回答已采纳
2回答
我正在使用databricks-connect和VS Code为Databricks开发一些python代码。对于基本的笔记本，它工作得很好，但我想对多个笔记本做同样的事情，并使用导入(例如，在另一个笔记本中使用import config-notebook )。然而，在VS代码中，import another-notebook工作得很好，但在数据库中却不起作用。据我所知，Databricks中<em
浏览 45提问于2021-10-19得票数 1
我想要在一个正在运行的Spark作业中获取集群链接(或手动组成链接的集群ID )。 这将用于打印警报消息中的链接，使工程师更容易访问日志。在Databricks中运行的Spark作业有可能实现这一点吗？
浏览 35提问于2021-06-30得票数 3
回答已采纳
call last): NameError: name 'dbutils' is not defined
那么，有没有办法通过包含databricks包来在pyspark中运行它，就像导入一样？感谢您的帮助
浏览 13提问于2018-08-17得票数 7
在中，我有一个爬虫克隆，它包含python文件，而不是笔记本。如何从不包含在dbfs中的报表引用python文件？📷
注意，我在这
浏览 0提问于2021-12-01得票数 1
回答已采纳
1回答
/作业/运行-现在(由SSLError(SSLCertVerificationError(1，'SSL: CERTIFICATE_VERIFY_FAILED证书验证失败:证书链中的自签名证书(_ssl.c:1091)‘)引起)
如果我要使用自定义python代码，那么我可以在python的requests模块中提供False =False，但是由于我使用的是内置的操作符，所以我看不到从气流到databricks</
浏览 8提问于2021-12-21得票数 2
我正在尝试使用存储帐户访问密钥通过Azure Databricks访问存储在ADLS位置中的数据文件。为了访问数据文件，我在azure databricks中使用python notebook，下面的命令运行良好。 spark.conf.set(
"fs.azure.account.key.storage-account-name>.dfs.core.windows.net") 错误：
浏览 106提问于2021-08-03得票数 0
我的设置包括连接到Azure DataBricks的git存储库，这允许在PyCharm中开发databricks python笔记本，在DataBricks UI中推送并运行更新的笔记本。每当我从WebUI更改笔记本文件并执行提交时，笔记本文件中的所有行都会加上#魔术：%pip install -r &
浏览 9提问于2022-05-23得票数 1
我在databricks中有一个笔记本，我将其放入作业中，以便每天在特定时间运行，并且我还从该笔记本创建了仪表板，如何在每次作业运行时自动导出仪表板结果？我知道Jobs API，但我找不到正确的命令来执行此操作。现在，我使用python包databricks-api (https://pypi.org/project/databricks-api/)连接到databricks。我的最终
浏览 12提问于2019-09-24得票数 4
5回答
Databricks很聪明，但是如何识别当前笔记本的路径呢？关于的指南没有帮助。它建议：dbutils.notebook.getContext.notebookPath这不是给我完整的路径，而是一些文件夹结构的路径，无法从笔记本访问。我需要路径，以便能够在与.ipynb文件相同
浏览 1提问于2018-11-28得票数 19
回答已采纳
因此，我目前正在尝试为我的Databricks开发环境设置秘密。我已经使用Databricks-cli成功地设置了它们。我现在正尝试在我的spark jar (用scala编写)中使用它们。但是，我找不到dbutils位于哪个包中。. = dbutils.secrets.get(scope = "SCOPE", key = "VARIABLE") 这是我正在尝试实现的用例，如果有任何帮助，我将不胜感激！
浏览 43提问于2019-02-07得票数 0
我将我的databricks工作区目录(/Users/xyz/)内容导出到databricks的特定位置，例如/dbfs/tmp，其中包含几个python笔记本和脚本，然后尝试调用以下代码从导出的位置运行名为xyz.py的python笔记本，如下所示：
dbutils.notebook.run("/dbfs/tmp/xyz", time
浏览 26提问于2020-06-05得票数 2
我正在尝试将prophet包安装到Databricks。我想把它直接安装到我的集群中，而不是笔记本上。下面是将其安装到notebook的代码： Sys.setenv(DOWNLOAD_STATIC_LIBV8 = 1)devtools::install_version("rstantools", version = "2.0.0")
insta
浏览 41提问于2021-11-08得票数 2
回答已采纳
作为Databricks的新手，只是探索在Databricks中访问第三方API的方法。Example : processed via DatabricksWe have one API which validate this format, question is can we consume
th
浏览 19提问于2019-02-26得票数 2
我在Databricks notebook上尝试了sys.exit(0)(Python代码)和dbutils.notebook.exit()。但这两种选择都不起作用。请建议在Databricks notebook中的特定单元格之后停止代码执行的任何其他方法。
浏览 20提问于2021-02-19得票数 1
我试图自动化创建蓝色数据库的过程与集群，笔记本和作业，并运行笔记本，通过地形。我所拥有的代码创建了上述资源。但我无法通过地形运行笔记本或作业。" "notebook" { language = "PYTHON" source = "./IOT_notebook.dbc"res
浏览 8提问于2022-08-20得票数 0
我的Python代码以下面的形式构造一个字符串这将产生一个类似如下的字符串：databricks fs cp dbfs://mt/extracts/dsp/123/f
浏览 1提问于2019-06-15得票数 0
云服务器
ICP备案
对象存储
腾讯会议
云直播
腾讯云开发者
