基本上，在%sql单元格中，我可以选择一个稍后在python单元格中使用的变量吗？我意识到这可能是不可能的。干杯!cell 1 ds = spark.sql("select * from duamonds")select * from diamonds cell 3display({ sql result })
浏览 47提问于2021-08-18得票数 0
回答已采纳
我想在WHERE子句中使用一个带有两个变量的where语句。我在这方面做了研究，研究了如何在Databricks的SQL语句中使用变量，并使用Python插入变量。a= 17091990
df = spark.sql(' SELECT * FROM table WHERE date between "a" AND "
浏览 1提问于2019-08-20得票数 2
我试图将SQL存储过程转换为databricks记事本。在下面的存储过程中，将实现2条语句。在这里，表1和表2是databricks集群中的delta湖表。我希望在SQL查询中使用python变量来代替max_date。该怎么做呢？%sqlINSERT INTO table1
SELECT * FROM table2 WHERE Date = max
浏览 5提问于2022-06-04得票数 0
4回答
因为在SQL Server中，我们可以像declare @sparksql='<any query/value/string>'一样声明变量，但是在spark sql中可以使用什么替代方法。
浏览 541提问于2020-11-26得票数 3
我有一个python脚本，它检查是否将APP_HOME目录设置为环境变量，并在该目录中选取几个文件继续进一步执行。
如果它在windows上运行，我将设置指向APP_HOME目录的环境变量。如果python脚本是作为databricks中的工作流创建的，则工作流为我提供了一个选项，在为任务选择集群时设置环境变量。但是，如果python脚本作为Azure数据工厂的Databricks pyth
浏览 3提问于2022-10-13得票数 0
回答已采纳
首先，我可以说在写这篇文章的时候我正在学习DataBricks，所以我想要更简单、更简单的解决方案以及更复杂的解决方案。请通过将表属性“delta.columnMapping.mode”设置为“名称”来启用列映射。有关详细信息，请参阅或使用别名重命名它。解释了如何在使用ALTER TABLE创建表之后将列映射模式设置为“name”，但没有解释如何在创建时设置它，特别是在使用如上所述的DataFrame API时。有办法这样做吗？更新：
阅读了和的文档，并受到罗伯特的回答
浏览 20提问于2022-06-16得票数 2
回答已采纳
jinja模板，我想实现以下目标：{ {% if cluster_mode == "single" %} "spark.databricks.repl.allowedLanguages":"sql,python,r&
浏览 4提问于2022-02-11得票数 0
我试图在Databricks SQL记事本中的%python变量和% SQL 变量之间切换。让我们想象一下这种情况-url_var = 'https://www.example.org/localdata_2020_01_01.csv'SET url_sql_var= $(url_var)
-- This doesn't work as ex
浏览 3提问于2021-04-26得票数 1
1回答
我正在使用databricks笔记本，我希望使用koalas.sql将几个python变量传递给一个SQL查询。 SELECT * WHERE animal= pyth_var
""&qu
浏览 15提问于2022-10-26得票数 0
我在Databricks中使用python。有没有办法使用spark.sql或任何其他方法来执行多个SQL语句？
浏览 4提问于2019-01-28得票数 1
1回答
我想创建一个变量，稍后我可以在同一个笔记本中的多个sql查询中使用该变量。变量本身只是sql语句的整数输出，如：然后，在后续的sql命令单元格中，我只需在计算中调用变量，如：select (count(cars) / $variable) as car_rate from table_x;
我在Databricks中
浏览 2提问于2021-09-24得票数 0
我在Databricks记事本中遇到了下面的SQL命令，我对下面的SQL命令中的${da.paths.working_dir}对象感到困惑。是python对象还是其他东西？备注：我的笔记本是SQL笔记本
浏览 4提问于2022-05-21得票数 0
回答已采纳
2回答
在这方面，我需要每天都使用SQL编写数据作业。作业位于文件data.sql中。我知道如何处理python文件。在这里，我要做以下几点： python: "pip" default: job_cluster_key: "basic
浏览 29提问于2022-11-17得票数 0
回答已采纳
如果不使用conda，则可以将环境变量MLFLOW_PYTHON_BIN设置为您的path可执行文件的路径。我试过以下几种方法source ~/.bashrcsys.setenv(MLFLOW_PYTHON_BIN=&qu
浏览 1提问于2020-03-11得票数 5
回答已采纳
我是在本地机器上使用Python的新手。到目前为止，我可以在Azure Databricks中编写代码。我想创建和部署连接到confluent kafka的库，并将数据保存到增量表。我弄糊涂了- 1]我是否需要通过如下设置从本地计算机连接到Databricks Delta，使用python将流存储到增量或将流存储到本地增量(我可以创建增量表
spark = pyspark.sql.SparkSession.builder.appName",
浏览 0提问于2021-01-08得票数 1
我已经在我的PC上设置了一个miniconda python环境，在那里我安装了databricks-connect包，并使用databricks-connect configure配置了该工具，以连接到我想在美国开发代码时使用的databricks实例。我需要连接到另一个不同的databricks实例，以便在欧盟开发代码，我想我可以通过设置一个不同的miniconda环境，在该环境中安装databricks-con
浏览 19提问于2021-03-13得票数 1
我在Databricks中创建了一个python笔记本，我有python逻辑，需要执行%sql命令。假设我想基于python变量执行commandlet2EXECUTE_SQL= Trueif condition :
%sql .....
浏览 2提问于2022-08-05得票数 0
回答已采纳
1回答
我需要更新我的python路径，以便可以在数据库上使用python3。在databricks notebook上： echo $PATH
然后，我运行： export PATH=/d
浏览 0提问于2019-12-20得票数 0
在Azure data bricks中，我创建了SQL笔记。我正在尝试使用变量，并在多个SQL语句中使用它。例如，声明财政年度，并在where标准中使用。意图是避免硬编码。看起来我不得不使用Python / Scala。有什么方法可以使用纯SQL语句来实现这一点吗？
浏览 23提问于2019-01-27得票数 2
云服务器
ICP备案
腾讯会议
云直播
对象存储
腾讯云开发者
