从装饰器访问Kedro上下文
装饰器是一种Python语言中的语法特性，它可以用于修改或扩展函数、类或方法的行为。装饰器可以在不修改原始代码的情况下，通过在目标函数或类的定义之前添加装饰器来实现对其功能的增强或修改。
Kedro是一个开源的数据管道开发框架，用于帮助数据科学家和工程师构建可维护、可扩展的数据管道。Kedro提供了一套规范和工具，帮助用户组织和管理数据管道的各个组件，包括数据集、转换节点、模型训练等。
在Kedro中，上下文是指当前数据管道的执行环境。通过访问Kedro上下文，我们可以获取当前数据管道的配置信息、数据集、节点等，并进行相应的操作和处理。
要在装饰器中访问Kedro上下文，可以使用@kedro.context.contextmanager装饰器。这个装饰器可以将一个函数转换为一个上下文管理器，使得在函数内部可以访问到Kedro上下文。
下面是一个示例代码，展示了如何使用装饰器访问Kedro上下文：
import kedro
from kedro.framework.context import load_context
@kedro.context.contextmanager
def kedro_context():
# 加载Kedro上下文
context = load_context()
try:
# 在上下文中执行代码
yield context
finally:
# 清理资源
context.close()
@kedro_context()
def my_function():
# 在函数内部可以访问Kedro上下文
catalog = kedro.catalog.Catalog.from_config(context.catalog)
# 进行相应的操作和处理
# 调用函数
my_function()在上面的示例中，我们定义了一个名为kedro_context的装饰器函数，使用@kedro.context.contextmanager装饰器将其转换为一个上下文管理器。在kedro_context函数内部，我们加载了Kedro上下文，并通过yield语句将上下文返回给被装饰的函数。在my_function函数中，我们可以通过访问Kedro上下文来获取配置信息、数据集等，并进行相应的操作和处理。
需要注意的是，上述代码中的context.catalog和kedro.catalog.Catalog.from_config只是示例，具体的操作和处理方式需要根据实际需求进行调整。
推荐的腾讯云相关产品和产品介绍链接地址：
- 腾讯云函数计算（Serverless）：https://cloud.tencent.com/product/scf
- 腾讯云容器服务（TKE）：https://cloud.tencent.com/product/tke
- 腾讯云数据库（TencentDB）：https://cloud.tencent.com/product/cdb
- 腾讯云对象存储（COS）：https://cloud.tencent.com/product/cos
- 腾讯云人工智能（AI）：https://cloud.tencent.com/product/ai
- 腾讯云物联网（IoT）：https://cloud.tencent.com/product/iot
- 腾讯云移动开发（Mobile）：https://cloud.tencent.com/product/mobile
- 腾讯云区块链（Blockchain）：https://cloud.tencent.com/product/baas
- 腾讯云元宇宙（Metaverse）：https://cloud.tencent.com/product/metaverse
请注意，以上链接仅供参考，具体的产品选择和使用需根据实际需求和情况进行评估和决策。
相关·内容
1回答
我正在尝试创建一个装饰器，在其中我需要一些关于项目和/或目录的信息。是否可以从装饰器内部访问项目上下文？我正在寻找诸如project_name、目录条目名称和管道节点名称之类的内容。
我创建了一种查找根目录的方法，方法是获取函数的文件路径inspect.getfile(func)，然后遍历该路径直到找到.kedro.yml，但当使用库中的函数时，此方法会中断。
浏览 9提问于2019-11-21得票数 0
2回答
Kedro -内存管理
、、、
我正在处理一个Kedro 0.17.2项目，该项目正在处理内存不足的问题，我正在努力减少内存占用。
我正在使用来自mprof库的memory-profiler进行分析，我注意到总是有一个子进程，并且在正在运行的节点中的第一次计算之后，主进程中的内存似乎重复。Kedro有可能复制内存中的数据吗？如果是的话，是否有办法避免这种情况？
备注：
我在用SequentialRunner
我不使用is_async cli选项
在节点执行中，我既不使用多线程也不使用多处理
浏览 1提问于2021-10-16得票数 3
回答已采纳
我们正在10多家公司之间部署一个数据联盟。Wi将为所有公司部署多个机器学习模型(一般是高级分析模型)，我们将对所有模型进行管理。我们正在寻找一种管理多个服务器、集群和数据科学管道的解决方案。我喜欢kedro，但不确定在使用kedro时管理所有这些的最佳选择是什么。
总之，我们正在寻找最好的解决方案来管理多个模型、任务和管道，在不同的服务器和可能的星火集群中。我们目前的选择是：
AWS作为我们的数据仓库和数据库，用于管理服务器、集群和任务。我不认为databricks的笔记本是构建管道和协同工作的好解决方案，所以我想将kedro连接到databricks (好吗？)使用databricks来
浏览 5提问于2020-11-20得票数 5
回答已采纳
1回答
我想用Kedro 0.17.5编写pytest单元测试。他们需要对管道创建的数据执行完整性检查。这些数据文件在catalog.yml中指定，并且已经使用kedro run成功地持久化。conf/base.中的catalog.yml
我在src/tests/pipelines/my_pipeline/.中有一个测试模块test_my_dataframe.py
如何以编程方式从catalog.yml中加载基于test_my_dataframe.py的数据目录，以便正确访问指定的数据文件？
或者，对于这个问题，我如何以编程方式加载整个项目上下文(包括数据目录)以同时执行节点等？
浏览 4提问于2022-06-25得票数 2
回答已采纳
我使用Kedro非常新，在我的conda环境中安装kedro之后，在尝试列出我的目录时会出现以下错误：
执行的命令：kedro catalog list
错误：
kedro.io.core.DataSetError:当解析DataSet df_medinfo_raw：Object ParquetDataSet的配置时，无法从kedro.extras.datasets.pandas加载异常。请参阅有关如何安装kedro.extras.datasets.pandas.ParquetDataSet相关依赖项的文档：
我安装了酮德洛槽，康达锻造：conda install -c conda-f
浏览 13提问于2022-01-15得票数 3
回答已采纳
我想知道如何在type-graphql中使用RESTDataSource，从而在redis中正确地缓存。如果能举个小例子，我会很感激的。 目前，我使用DI容器来获取服务，该服务是从RestDataSource类扩展而来的，但这不是正确的方式。 BookmarkResolver.ts import { Resolver, FieldResolver, Root, Query, Ctx, Authorized } from 'type-graphql';
import { DealService } from '../service/DealService';
i
浏览 35提问于2020-01-10得票数 10
是否有任何方法访问kedro管道环境名称？其实下面是我的问题。
我正在加载配置路径，如下所示
conf_paths = ["conf/base", "conf/local"]
conf_loader = ConfigLoader(conf_paths)
parameters = conf_loader.get("parameters*", "parameters*/**")
catalog = conf_loader.get("catalog*")
但是我没有像"conf/server"、
浏览 9提问于2021-12-14得票数 1
回答已采纳
我正在尝试使用kedro来运行工作流。下图是我的工作流程(节点1-3是顺序的，节点31、32和33是节点3的三个分支)。您可以看到kedro是按从1到3的顺序运行的，这是由于节点之间明显的依赖关系。然而，当涉及到31，32和33个节点时，kedro实际上是随机运行的。它可以从31、32或33开始。谁知道我可以让kedro先跑31，然后跑32，再跑33？谢谢! ? 我已经尝试标记所有节点，但是当kedro进入节点31到33时，运行顺序是随机保持的
浏览 13提问于2021-09-10得票数 0
1回答
抱歉，标题写得不太好。
我的目标是使用AJAX设置一个Flask，这样我就可以在Program运行时向页面添加动态内容。
我使用flask_oauthlib获取REST的访问令牌，然后查询REST中的分页内容。
当我们重复REST调用从API获取不同页面的内容时，我想显示“进度”。REST访问令牌存储在用户的会话变量中。
我遵循了步骤来获得一个基本的动态页面并运行。但是，当我开始修改"progress“函数以添加对会话变量的访问时，一切都会失败。
我得到了错误：RuntimeError: Working outside of request context.，它告诉我我不在正确的会话上
浏览 4提问于2017-07-25得票数 1
回答已采纳
3回答
我创建了一个名为Foo的conda环境。激活这个环境之后，我用pip安装了Kedro，因为conda给了我冲突。即使我在Foo环境中，当我运行：
kedro jupyter lab
它从我的base环境中获取模块，而不是Foo环境。知道为什么会发生这种情况，以及如何改变我的笔记本所检测到的模块？
编辑
通过错误处理我的代码，我发现在\AppData\Roaming\jupyter\kernels\kedro_project\kernel.json上，它是从基本环境调用python，而不是从Foo环境调用。我手动更改了它，但是是否有一种模式自动设置\AppData\Roaming\jupyter
浏览 9提问于2022-05-17得票数 0
回答已采纳
1回答
我目前正在与kedro, version 0.15.4一起使用pipenv, version 2018.11.26。
目前，如果要使用Pipenv，我必须执行以下操作(对于本例，我希望该项目驻留在kedro-pipenv目录中)：
mkdir kedro-pipenv && cd kedro-pipenv --这是必需的，以便创建的virtualenv“绑定”到项目目录，这实际上意味着它的名称是基于目录名的，此时pipenv install kedro或pipenv shell命令是executed.Unfortunately，，Pipenv没有支持自定义virtualenv
浏览 0提问于2019-11-25得票数 2
我想使用jupyter笔记本在基本env中运行kedro管道。我这样做的方式如下：
%reload_kedro --env=base
session.run(pipeline_name='dpfm1')
这样做，%reload_kedro命令将引发以下错误：
RuntimeError: Could not find the project configuration file 'pyproject.toml' in --env=base. If you have created
your project with Kedro version <0.17.
浏览 13提问于2022-10-07得票数 0
回答已采纳
1回答
我想创建我自己的Kedro初学者。我试着复制熊猫的相关部分。我有一个cookiecutter.json文件，它具有我认为是适当的映射，并且我已经更改了repo和包目录名，以及对Kedro版本的任何引用，这样它们就可以使用cookie裁剪器了。
我能够用kedro new --starter=path/to/my/starter从我的初学者中生成一个新的项目。但是，新创建的项目使用项目、包和回购名称的默认值，而不提示我在终端中输入任何内容。
我是不是弄错了什么东西？如何创建一个启动程序，提示用户在创建新项目时覆盖默认值？
下面是我的初学者项目顶部目录中cookiecutter.json的内容：
浏览 5提问于2022-01-06得票数 0
回答已采纳
我已经使用建立管道使用虹膜数据，并创建了一个车轮和鸡蛋文件使用"kedro包“。在此之后，我使用python创建了一个虚拟环境，并在那里安装了轮子和鸡蛋文件。我尝试从环境中的脚本文件夹和(exe文件)运行管道文件，但是它抛出的“找不到kedro.yml错误”。
如果这是传输项目和运行管道的正确方式，请您帮助我吗?如果不是，您能帮助我正确地部署管道并在新的环境中运行它们吗？
浏览 2提问于2020-05-04得票数 2
在上下文处理器中，我希望能够访问在装饰器中设置的值。因此，事件的顺序是：
装饰器集值
上下文处理器具有对值的访问权限。
视图呈现
最终目标是能够只为某些视图有条件地运行上下文处理器。也许还有比用装饰师更好的方法吗？
浏览 3提问于2015-01-15得票数 1
回答已采纳
在kedro datacatalog中配置azure blob存储数据集时遇到错误。
我在我的catalog.yml中定义了如下数据集：
brand_dataset:
type: pandas.CSVDataSet
filepath: "abfs://container/my_file.csv"
credentials: my_creds
load_args:
sep:';'
尝试从ipython访问数据集时，会遇到以下错误
DataSetError:
unexpected unindent (core.py, line 160).
F
浏览 3提问于2021-11-25得票数 0
我想通过命令行控制kedro参数。
根据，kedro可以指定运行时参数如下：
kedro run --params key:value
> {'key': 'value'}
它起作用了。同样，我尝试指定列表参数，如下所示：
kedro run --params keys:['value1']
> {'keys': '[value1]'}
它不能工作，因为kedro 不是列表，而是str。可能，可能是相关的。
希望能提几件事让kedro评估像yaml这样的列表参数。
浏览 3提问于2020-06-20得票数 1
回答已采纳
1回答
我想捆绑Python包kedro，它提供了一个命令行界面(kedro)。此外，我还想把Python包kedro-docker放到快照中。第二个包扩展了第一个包的命令行界面(kedro docker)。但是当我使用下面的snapcraft.yaml创建快照时，我只得到了第一个包的命令行界面： name: kedro
base: core18
version: latest
description: |
Kedro is a development workflow framework that implements software
engineering best-pract
浏览 15提问于2020-05-02得票数 0
回答已采纳
我能够使用kedro run命令毫无问题地运行管道。不过，出于某种原因，我再也无法从朱庇特笔记本中访问我的上下文和目录了。当我运行kedro jupyter notebook并在选择" new“时使用我的项目名称启动一个新的(或现有的)笔记本时，我会得到以下错误：
context
NameError: name 'context' is not defined
catalog.list()
NameError: name 'catalog' is not defined
编辑：
在运行魔术命令%kedro_reload之后，我可以看到我的ProjectC
浏览 2提问于2021-02-02得票数 2
我有一个函数
def函数(**kwargs)：return
如何将变量作为节点输入传递给它？
**inputs**
Return node inputs as a list, in the order required to bind them properly to the node’s function. If the node’s function contains kwargs, then kwarg inputs are sorted alphabetically (for python 3.5 deterministic behavior).
浏览 2提问于2020-08-31得票数 0
我试图通过控制器prefix和装饰器的path参数获得一个变量。我知道，但我宁愿尽量避免使用它。
/*************************
* eneity.config.ts
*************************/
import { registerAs } from '@nestjs/config';
export default registerAs('cat', () => ({
cat: {
urlPrefix: 'cat',
paramNa
浏览 1提问于2020-01-20得票数 1
回答已采纳
1回答
我必须测试我的kedro项目是否在github中工作，所以我创建了一个新的环境，然后：
git clone <my_project>
pip install kedro kedro[pandas] kedro-viz jupyter
kedro build-reqs
kedro install
安装失败，然后我重试几次(有时是2或3次)，然后下一次尝试就成功了。
编辑: python -V :Python3.7.10kedro--版本: kedro，版本0.17.3
我不能发布我的requirement.txt (主要是代码)，所以这里是我的requirement.in
浏览 6提问于2021-06-11得票数 2
回答已采纳
我在S3存储桶中有多个文本文件，我可以读取和处理这些文件。因此，我在Kedro datacatalog中定义了PartitionedDataSet，如下所示： raw_data:
type: PartitionedDataSet
path: s3://reads/raw
dataset: pandas.CSVDataSet
load_args:
sep: "\t"
comment: "#" 此外，我实现了这个solution，通过包括亚马逊网络服务密钥在内的环境变量从凭证文件中获取所有秘密。 当我使用kedro run在本地运行
浏览 14提问于2020-09-22得票数 2
我对凯德罗很陌生，我不知道我在这里问的问题是否对。
是否有可能在kedro上绘制x和y列表？
我正在运行带有mlflow的kedro管道。我有catalog.yaml，我记录度量和工件。
最终目标是：
kedro运行1#生成x11,2,3,4和y1=1,2,2,2 --这些数字只是例子
kedro 2# generate x21,2,3,4和y2=3,1,2,1 --这些数字只是例子
kedro 3# generate x21,2,3,4和y2=1,3,3,3 --这些数字只是例子
然后kedro mlflow ui
选择run1、run2和run3，然后单击“比较”。
在散点图上->能
浏览 4提问于2022-04-01得票数 0
我使用PartitionedDataSet从azure存储加载多个csv文件。我在datacatalog中定义了数据集如下所示。
my_partitioned_data_set:
type: PartitionedDataSet
path: my/azure/folder/path
credentials: my credentials
dataset: pandas.CSVDataSet
load_args:
sep: ";"
浏览 8提问于2021-12-04得票数 1
回答已采纳
嗨，我有一个有很多方法的项目。每个方法映射到不同的urls。
views.py
def method1(request):
print 'hello world'
def method2(request):
print 'hello world2'
def method3(request):
print 'hello world3'
我想要做的是做一些与权限相关的事情，这样用户就只能访问一个方法。例如，如果用户拥有method2()的权限，他/她只能访问该方法。他/她不能访问method1()或method2()。
就
浏览 5提问于2015-07-17得票数 0
我试着部署例子Kedro初学者项目(熊猫-虹膜)。我成功地在本地运行它(kedro run)，然后让kedro-docker安装，插入一个Docker，构建映像并将其推送到我的注册表。
不幸的是，kedro docker run和docker run myDockerID/iris_image都会产生相同的错误：
DataSetError: Failed while loading data from data set
CSVDataSet(filepath=/home/kedro/data/01_raw/iris.csv, load_args={},
protocol=file, save
浏览 3提问于2022-09-17得票数 0
3回答
WPF装饰器剪辑
、、
我在ScrollViewer中有一个ItemsControl。ItemsControl中的项被扩展为一个基本上由Adorner组成的DataTemplate。
现在的问题是，当滚动时，Adorner的可视子对象在ScrollViewer之外是可见的。假设我从水平偏移量0滚动到100，Adorner的可视子对象向左移动，并且在ScrollViewer旁边可见，尽管它们应该被隐藏。在ItemsControl或ScrollViewer上设置ClipToBounds不起作用。
我知道，Adorner是按照z顺序呈现在所有元素之上的，但在ScrollViewer这样的情况下，它们实际上应该是不可见的。顺
浏览 3提问于2009-09-03得票数 10
与前面描述的类似，我遵循了，在创建管道的步骤中，运行kedro run --node=preproces_companies_node时得到了以下错误
ValueError: Pipeline does not contain nodes named ['preprocess_companies_node'].
相关文件将按照本教程中的指示指定。
src/kedro_tutorial/pipelines/data_processing/pipeline.py
from kedro.pipeline import Pipeline, node
from .nodes
浏览 3提问于2021-07-19得票数 1
1回答
我希望能够从Decorator访问会话变量。现在我不能这样做，我也不能访问控制器实例变量，比如说@session_variable。
有没有一种干净的方法来实现这一点？
谢谢!
浏览 1提问于2014-10-24得票数 3
我处理分区数据(分区分割或带有“分区”列的SQL表)。我希望Kedro从我在运行时提供的分区中加载和保存数据(例如kedro运行-params分区:a)。分区的数量很大，而且是动态的。
我用星火。是否有一种以SparkDataSet或SparkJDBCDataSet所需方式加载/保存数据的方法？
浏览 13提问于2022-01-22得票数 0
1回答
如何使用发电机与酮？
、、、
多亏了，我非常喜欢使用生成器来进行数据处理，以使内存消耗降到最低。现在我正在做我的第一个kedro项目，我的问题是如何在kedro中使用生成器。当我有一个生成生成器的节点，然后使用kedro run --node=example_node运行它时，我会得到以下错误：
DataSetError: Failed while saving data to data set MemoryDataSet().
can't pickle generator objects
在使用kedro时，我应该总是将所有数据加载到内存中吗？
浏览 5提问于2022-08-23得票数 1
回答已采纳
我收到此错误：
DataSetError: Failed while loading data from data set SQLQueryDataSet(load_args={}, sql=select * from table)
当我运行时(在kedro jupyter笔记本中)：
%reload_kedro
c:\users\name.virtualenvs\pipenv_kedro\lib\site-packages\ipykernel\ipkernel.py:283:DeprecationWarning：should_run_async将来不会自动调用transform_cell。请
浏览 4提问于2021-04-22得票数 0
1回答
我一直在运行Kedro教程( hello world和spaceflight)，我想知道使用kedro进行数据并行化是否容易。想象一下，如果我有一个需要在数百万个文件中执行的节点。
我似乎有一个选项kedro run -p，但它只做任务并行化(正如这里所说的)。
感谢您的反馈
浏览 0提问于2019-11-20得票数 2
我们使用的是kedro版本0.15.8，我们以这种方式从目录中加载了一个特定项：
from kedro.context import load_context
get_context().catalog.datasets.__dict__[key]
现在，我们将更改为kedro 0.17.0，并尝试以相同的方式加载目录数据集(使用框架上下文)：
from kedro.framework.context import load_context
get_context().catalog.datasets.__dict__[key]
现在我们得到了错误：
kedro.framework.conte
浏览 4提问于2021-02-02得票数 4
回答已采纳
我参考构建了示例kedro项目，并在mlflow.yml中指定host作为我的全局ip地址。但是当我点击"kedro mlflow ui“命令时，它仍然监听本地。即使我只在mlflow.yml中将端口指定为5001 (非默认值)，它也不起作用。有人能帮我吗。
python版本: 3.6.8 (anaconda) kedro版本: 0.17.0 kedro mlflow版本: 0.6.0
浏览 21提问于2021-04-02得票数 2
目前，我使用的是kedro和kedro-viz。 我可以从catalog.yml中指定一个数据集层。 hoge:
type: MemoryDataSet
layer: raw 但我不知道如何使用parameters.yml step_size: 1
learning_rate: 0.01 如果不是用parameters.yml，而是用run.py，我想看看示例代码。
浏览 17提问于2020-08-26得票数 0
回答已采纳
你好，我正在使用kedro (一个管道工具)，并且希望在我推到我的github时使用github操作来触发kedro命令(kedro run)。
因为我有本地回购中的所有数据，所以我认为在本地机器上运行kedro命令是有意义的。所以我的问题是，是否有一种方法可以使用github操作触发本地操作？也许使用自我托管的跑步者？
浏览 5提问于2022-03-27得票数 0
2回答
对kedro有问题。“register_pipelines”函数似乎没有运行或创建我要从中返回的默认管道。
错误是
(kedro-environment) C:\Users\cc667216\OneDrive\DCS_Pipeline\dcs_files>kedro run
2021-03-22 13:30:28,201 - kedro.framework.session.store - INFO - `read()` not implemented for `BaseSessionStore`. Assuming empty store.
fatal: not a git reposi
浏览 2提问于2021-03-22得票数 1
回答已采纳
是否可以在Kedro笔记本中覆盖从parameters.yaml文件中获取的属性？
我正在尝试动态更改notebook中的参数值。我希望能够为用户提供运行标准管道的能力，但具有可定制的参数。我不想更改YAML文件，我只想更改笔记本生命周期的参数。
我已经尝试在上下文中编辑参数，但这没有任何影响。
context.params.update({"test_param": 2})
我是否遗漏了什么，或者这不是一个预期的用例？
浏览 11提问于2020-02-19得票数 2
回答已采纳
考虑以下代码：
class MyCustomDescriptor:
def __init__(self,foo):
self._foo = foo
def __call__(self,decorated_method):
# Here's my question... Is there any way to get a reference to the
# type (ClassA or ClassB) here?
return self
def __get__(self,instance,t
浏览 4提问于2011-12-08得票数 2
回答已采纳
我最近发现了Mylyn :这是一个非常棒的Eclipse特性！非常方便。
但是，在处理任务时，有没有办法在浏览器中禁用灰色文件？
我使用Mylyn进行的典型Eclipse编码会话如下所示：
所有这些灰色使得文件名难以阅读，因为对比度较低。当我必须在浏览器中找到一个新文件时(这种情况经常发生)，我不得不睁大眼睛才能看清文件的名称……我受不了了！
有没有办法禁用这种灰色？我已经在Eclipse选项和Google上搜索过了，都没有用。
浏览 3提问于2012-10-25得票数 3
回答已采纳
如何从以下位置切换：
<Checkbox
//do I need it to be @onclick?
onclick={{action "toggleCheckBox" checkBox}}
/>
至：
<Checkbox
{{on "click" this.toggleCheckBox "test"}}
/>
假设我没有为我的控制器使用类：
import Controller from '@ember/controller';
export default Controller
浏览 0提问于2020-04-03得票数 0
2回答
我们正在努力为在Kedro中使用的数据建立正确的模型--我们使用的是推荐的Raw\Int\Prm\Ft\Mst模型，但是我们正在为一些概念而奋斗。
什么时候数据集是特性而不是主数据集？区别似乎很模糊..。
主数据集可以使用来自另一个主数据集的数据吗？
从INT层构建特性数据集是一种良好的实践吗？还是应该一直通过小学？
我理解数据建模没有硬性和快速的规则，但这些都是大的建模决策&任何关于Kedro建模的指导或最佳实践都会非常有用，我只能找到一个定义中的层的表。
如果有人能提供任何进一步的建议或博客\docs谈论Kedro数据建模，那将是很棒的！
浏览 6提问于2021-06-10得票数 2
回答已采纳
1回答
酸洗文件
、、、、
我使用kedro与databricks-连接来运行我的机器学习模型。我使用databricks笔记本对模型进行了培训和测试，并保存了模型的泡菜文件以存储蓝色的blob。为了在本地测试管道，我下载了泡菜文件并在本地存储它。kedro在本地存储时可以很好地读取文件，但是问题是当我尝试从azure直接将文件读入kedro时，我得到了以下错误：“无效加载键？”
不幸的是，我不能发布任何截图，因为我这样做是为了我的工作。我的想法是，泡菜文件在天蓝色时是不同的存储方式，当在本地下载时，它是正确存储的。
为了更清楚起见，我试图存储一个经过训练的使用状态模型(sm.logit)的logistic回归模型。
浏览 2提问于2022-04-01得票数 -1
1回答
跟进的问题。我使用的是Kedro v0.18.2。我正在尝试使用TemplateConfig，因此我在conf/base下创建了一个globals.yml，如下所示：
paths:
base_path: s3://my_project
datasets:
pdf: base.PDFDataSet
png: pillow.ImageDataSet
csv: pandas.CSVDataSet
excel: pandas.ExcelDataSet
data_folders:
raw: 01_raw
intermediate: 02_int
浏览 14提问于2022-07-25得票数 0
我想使用不同的输入运行一个kedro管道，并将结果保存在输出文件夹中，其中通过命令行提供输入路径和输出路径
我提出了使用kedro.config.TemplatedConfigLoader将新变量传递给jinja2模板编目的可能性，但通过这种方式，我只能手动定义钩子中的globals_dict变量，如kedro文档中所示。
理想情况下，我希望运行下面这样的代码：
kedro run --pipeline="my_pipeline" --input="path_to_input_1" --output="path_to_output_1"
kedr
浏览 6提问于2021-09-10得票数 0
这个问题是上一个关于使用MediatR和装饰器设置DryIOC的问题的另一个后续问题：
在这个示例中，设置类似于我前面的问题，我们有请求(IAsyncRequestHandler)和通知(IAsyncNotificationHandler)，通知是从请求中触发的，并且两者都依赖于每个解析范围都需要注入的DbContext。
我现在做的是装饰IAsyncRequestHandler，我使用一个键将IActionHandler类型的依赖项传递给装饰器。我像这样注册依赖项：
c.Register<IActionHandler, SomeActionHandler>(serviceKey:
浏览 3提问于2016-12-10得票数 1
我开始使用Kedro，所以我为默认的虹膜数据集创建了新的kedro项目。
我能够成功地使用kedro run命令运行它。我现在的问题是如何将它作为python命令运行？从文档中，我看到命令kedro run运行src/project-name/run.py。但是，如果我运行run.py，就会得到ModuleNotFoundError: No module named 'iris_workflow'。如果我从run运行src/project-name/cli.py方法，我会得到同样的错误。
如果我在终端上运行kedro run，一切都很好。
如何在没有kedro run的情况下从
浏览 3提问于2021-03-06得票数 1
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM活动推荐
腾讯云开发者
