我正在尝试使用https://community.cloud.databricks.com/的笔记本中的以下代码来访问之前通过命令行界面复制过来的模型文件 with open("/dbfs/cat_encoder.joblib，方法是运行以下命令： dbfs cp cat_encoder.joblib dbfs:/cat_encoder.joblib 然后做 databricks fs ls &quo
浏览 94提问于2020-11-18得票数 1
我有python项目，它查询server数据库，并在SQL服务器中进行一些转换。该项目使用的是具有所有DB相关属性的config.yml。现在，我正试图在databricks上托管它，这样我就可以将它作为笔记本运行。我已经将所有python文件导入到databricks工作区。但是，在执行主.py文件时，我得到以下错误
FileNotFoundError: [Errno 2] No such file or directory: 'confi
浏览 2提问于2021-02-12得票数 0
回答已采纳
我有一些pyspark代码，我将其打包为库，以便可以通过pip安装并在其他项目中使用。这段代码加载了我的库中包含的parquet文件。在databricks上安装pip后，我可以看到file:/databricks/python/lib/python3.7/site-package/my_package/my_parquet_dir中</e
浏览 18提问于2020-08-17得票数 1
我正在遵循教程来自动化在Azure Databricks集群上部署和安装库的过程。然而，在Data Thirst的扩展中使用任务的"Deploy the library to DBFS“这一步让我束手无策。此任务的配置如下所示：
当我尝试通过Databricks CLI手动上传库时，我用我的令牌检查了一下，它工作得很好。因此，问题不应该是由于令牌的权限造成的。
有谁能对此提出任何解决方案吗？或者，有没有其他方法可以通过Azure DevOps上的发布CD管道将库部署到Az
浏览 0提问于2020-07-01得票数 1
我正在从Azure数据工厂运行databricks python活动。我想从Azure blob-storage/data-lake中选择python/shell脚本作为dbfs路径。如果没有'dbfs:/‘，我当前的ADF databricks python活动是不允许的。 你能帮我一下吗？ ?
浏览 24提问于2021-07-23得票数 0
回答已采纳
我需要开发一个python应用程序，它可以在正常的机器上运行，比如windows、linux或databricks。我的要求是允许python应用程序动态地识别脚本实际运行的位置。如果我的python代码在Windows上运行，它应该知道代码是在windows上运行的。就像Linux的智慧一样。我使用Platform.system()获取信息。因此，我没有任何命令来确定这个平台是否是Linux/Windows/<e
浏览 4提问于2022-09-29得票数 1
回答已采纳
我安装了Databricks CLI，但无法以这样的方式处理库：我知道模块在那里：-a
PS C:\Users\DNaught1\AppData\Local\Programs\Python\Python3
浏览 8提问于2020-10-13得票数 0
回答已采纳
1回答
在尝试使用databricks的新repo功能实现解决方案时，我面临着一个小小的挑战。我在一个需要能够使用python和pyspark代码的interdisziplinairy项目中工作。因此，我们将python源代码添加到所有库文件中，以便它们可以在数据库中轻松更改(由于##开发尚未完成，代码也将由pyspark团队更改)。问题是，在databricks中直接导
浏览 0提问于2021-04-30得票数 2
我想在python代码的帮助下，使用API从databricks外部访问DBFS数据。我如何才能做到这一点？
浏览 0提问于2020-07-02得票数 0
在我们的Azure DevOps build+release管道中，我们使用.whls。现在，我们将.whl文件推送到/dbfs/FileStore/libs。还可以将.whl文件推送到Databricks (通过编程方式使用Azure DevOps)?--这是我想将它(/Models)放在这里的地方：
我之所以问这个问题，是因为我们的一个客户需要对数据库中的.whl文件设置权限(用户可以读取这些权限)。这种<
浏览 18提问于2022-01-05得票数 1
我能够使用databricks中的bash命令从目录/databricks/driver中删除特定扩展名的文件。%%bash
但我不知道如何在python脚本中访问和删除dbfs之外的文件，
我认为使用dbutils我们不能访问DBFS之外的文件，下面的命令
浏览 0提问于2020-12-03得票数 0
回答已采纳
我使用Python在databricks中生成了一个带有实用脚本的电源点面板。我想现在访问内核中的文件，但是由于甲板上的图像，它显示了奇怪的符号。如何纠正这个输出甲板图像的语句？
浏览 4提问于2019-11-12得票数 1
回答已采纳
我对Databricks还是个新手，所以请原谅我在这里缺乏知识。我正在使用Azure中的Databricks资源。我现在主要使用UI，但我知道一些功能只能使用databricks-cli，我已经设置了它，但还没有使用它。是否可以使用Databricks
浏览 47提问于2021-11-24得票数 1
我需要在python中开发一个应用程序。python应用程序将与任何数据库交互，并对其执行sql语句。它还可以与databricks实例进行交互，并查询Databricks中的表。要求python应用程序应该是独立于平台的。因此，应用程序是以这样的方式开发的，如果它在databricks上运行，只有这样，它才会触发应用程序中特定于火花的代码。如果它在独立节点上运行，则跳过。python程序与Azur
浏览 7提问于2022-09-21得票数 0
当我试图将雪花-sqlalchemy库附加到Databricks中的Python 3集群时，它会破坏我的python构建，在安装后续库时会出现以下错误：
The work
浏览 1提问于2019-01-24得票数 2
回答已采纳
我想一次复制所有的代码，然后从azure databricks运行它--我看到了一种从azure数据工厂运行python代码的方法，但是我看到它只针对一个python文件，对吗？我能通过CLI或azure数据工厂访问这个轮子吗？我会失去设置参数的选项吗？Thx很多
编辑我想总结一下我所发现的，下面的一些可能真的是错误的。--我可以将所有代码重写到笔记本->中
浏览 5提问于2020-01-09得票数 1
我试图通过使用凭据通将Azure存储帐户Gen2容器挂载到dbfs，从而将其访问到其Databricks工作区中的一个团队。我希望能够使用Active Directory管理访问，因为最终需要在只读中安装容器。我的代码基于本教程："spark_conf": {
"spark.databricks.cluster.profile": "serverless"
浏览 2提问于2020-01-14得票数 1
回答已采纳
2回答
我通过Azure拥有一个Databricks工作区，我使用Databricks Job运行一些创建文件的python脚本。
我想知道我是否能够检索在作业完成后创建的这些文件。在Azure中的中，我看到一个与databricks工作区相关联的存储帐户，在容器中有一个“作业”条目。当我试图访问它时，我会得到一个DenyAssignmentAuthorizationFa
浏览 10提问于2022-11-23得票数 0
回答已采纳
云服务器
ICP备案
实时音视频
云直播
对象存储
腾讯云开发者
