pyspark GBTRegressor对象在加载模型后没有'transform‘属性

文章/答案/技术大牛

发布

1回答

apache-spark、pyspark、apache-spark-ml

我收到了一个预先训练好的火花源模型(GBTRegressor)，但我无法在数据集上使用它来获得预测。我看过一些关于使用Pipeline vs PipelineModel的帖子，但在这种情况下，它只是一个回归对象，我不能用PipelineModel加载它。我可以使用以下命令成功加载模型： model = GTBRegressor.load(model_path)'pyspark.ml.regression.GBTRegresso

浏览 39提问于2020-08-18得票数 1

2回答

如何在PySpark中求取估计量的所有参数

apache-spark、pyspark、apache-spark-ml

我有一个RandomForestRegressor，GBTRegressor，我想得到它们的所有参数。我发现可以通过几个get方法来完成这个任务，比如：est =RandomForestRegressor()est.getSeed() 但是RandomForestRegressor和GBTRegressor有不同的参数，所以硬核所有这些方法并不是

浏览 7提问于2017-03-02得票数 1

回答已采纳

1回答

属性错误:管道对象没有属性转换

apache-spark、pyspark、pipeline、apache-spark-ml

我建立了一个logistic回归模型，使用spark管道并保存了它。我试图将管道应用到新的记录集上，并收到一个错误。我的管道有矢量汇编程序、标准定标器和logistic回归模型。我尝试了pipeline.transform并收到了以下错误 from pyspark.ml importPipeline pipelineModel = Pipeline.load(

浏览 1提问于2019-07-15得票数 0

1回答

如何用IDFmodel保存PySpark

apache-spark、pyspark、apache-spark-mllib

我制作了一个带有IDFModel和ipython笔记本的PySpark，如下所示：from pyspark.mllib.featuresplit_data_train = txtdata_train.map(parse) #my parse function puts RDD in form I want tf_train = hashingTF.transformtfidf_train = idf_train.transform(tf

浏览 5提问于2015-08-31得票数 4

回答已采纳

2回答

火花Hadoop没能得到广播

scala、hadoop、apache-spark、hdfs、spark-dataframe

作为我的目标的总结，我正在解析pdfs中的文本，它作为base64编码的字符串存储在JSON对象中。我正在使用Apache获取文本，并试图大量使用数据帧来简化操作。在我来到这里之前，我实际上正在尝试将最后的数据框架写成：这给我带来了各种各样的“文件/路径已经存在”的头痛。hdfs://hadoophost.com:8888/user/spark/hawkeye-nb-ml-v2.0").firs

浏览 0提问于2016-06-14得票数 2

回答已采纳

1回答

在SparkVersion3.0.0中加载和应用MultilayerPerceptronClassifier时发出/错误

pyspark、apache-spark-mllib、apache-spark-ml、spark3

IllegalArgumentException: MultilayerPerceptronClassifier_.参数求解器给出的无效值自动我相信我在Spark3.0.0，Scala2.1.2中加载MultilayerPerceptronClassificationModel时发现了一个bug，我已经测试过，并且可以看到至少在Spark2.4.3，Scala2.11中没有这个bug。。我在一个databricks集群上使用pyspark，并“从pyspark.ml.

浏览 2提问于2020-07-08得票数 0

回答已采纳

1回答

管道模型的电火花模型解释

apache-spark、pyspark、decision-tree、apache-spark-mllib

我使用管道模块在火花放电中实现DecisionTreeClassifier，因为我有几个特性工程步骤要在我的数据集上执行。代码类似于星火文档中的示例：from pyspark.ml import Pipelinefrom pyspark.ml.feature import StringIndex

浏览 6提问于2016-05-04得票数 2

1回答

AttributeError: HashingTF对象没有属性“_java_obj”

pyspark

/pyspark/init.py"，第18行，在hashingTF = HashingTF(ipnutCol=tokenizer.getOutputCol()，outputCol="features")文件“/opt/module/spark-2.4.3-bin-hadoop2.7/python/lib/pyspark.zip/pyspark/init.py”，第110行中，在

浏览 1提问于2019-08-24得票数 0

2回答

AttributeError：“LogisticRegressionTrainingSummary”对象没有特性“”areaUnderROC“”

python-3.x、machine-learning、pyspark、logistic-regression、apache-spark-ml

我想为我的机器学习模型运行ROC测试下的区域，但弹出属性错误。下面是我的完整代码，其中包含错误详细信息。我已经有了字符串索引器，一个热门的编码器和向量汇编程序。请参考下面的完整代码：import pyspark.sql.functions as Fmodel = pip

浏览 6提问于2021-10-18得票数 1

0回答

Spark:从管道模型中提取ML logistic回归模型的摘要

python、apache-spark、pyspark、pipeline、logistic-regression

我在拟合逻辑回归之前的最后几行：from pyspark.ml.classification importcategoricalCol in categoricalColumns],from pyspark.ml.classificationimport LogisticRegression

浏览 4提问于2017-12-07得票数 5

回答已采纳

4回答

如何在scala中保存RandomForestClassifier火花模型？

scala、apache-spark、apache-spark-mllib

我使用以下代码构建了一个随机森林模型：importprediction").setOutputCol("predictedLabel").setLabels(labelIndexer.labels)val model = rf.fit(training) 现在，我希望保存模型，以

浏览 13提问于2016-05-18得票数 5

回答已采纳

2回答

如何保存管道和RandomForestClassificationModel

apache-spark、pyspark、apache-spark-mllib

我无法保存使用python/spark的ml包生成的随机森林模型。rf])>>> model.save("fittedpipeline") >>> rfModel

浏览 2提问于2017-07-08得票数 7

回答已采纳

1回答

Rails删除编辑记录而不提交

ruby-on-rails、forms、simple-form、cocoon-gem

在编辑对象时，我遇到了以下问题：2)检查db，一旦页面加载顶级属性(非嵌套属性)，页面加载后，数据库中的属性(非嵌套属性)就会被删除，但是select标记被选中为正确的值，就好像加载时数据是正确的一样。3)在不保存(返回到/model/:id)的情况下离开页面会执行以下操作： 3.1)不更新对象，因为<em

浏览 4提问于2016-05-04得票数 1

回答已采纳

1回答

如何在PySpark中使用StandardScaler标准化测试数据集？

apache-spark、pyspark、apache-spark-ml

inputs[4,6,12][7,8,14]... inputs列是将VectorAssembler类应用于3个单独的列后包含模型特征的向量当我尝试使用StandardScaler转换测试数据时，如下所示，我得到一个错误，指出它没有transform方法： from pyspark.ml.feature import StandardScalerStandardScaler(inputCol="inputs"

浏览 52提问于2021-01-02得票数 0

回答已采纳

1回答

访问模型中的Tensorflow.js图层属性

javascript、tensorflow、tensorflow.js

加载模型后，请执行以下操作：(async function () {})(); 在同一路径中，我将权重保存在一个.bin文件中。现在，我的问题是，我需要在加载模型后更改GaussianNoise层的stddev和GaussianDropout的速率，最好是直接从模

浏览 1提问于2021-01-03得票数 0

3回答

Apache Spark MLlib:如何从PMML导入模型

java、apache-spark-mllib、pmml

我有一个PMML文件，它编码了一个不是从MLlib导出的逻辑回归模型。(我知道，但我需要从PMML导入)

浏览 1提问于2017-01-29得票数 8

1回答

如何根据下载的图像大小创建动态大小的行高？

ios、swift、uitableview、swift4

我正在尝试根据从firebase下载的图像的纵横比在我的UITableView中创建动态大小的行高。

浏览 2提问于2018-01-14得票数 0

回答已采纳

1回答

加载的模型不需要评估吗？

pytorch

加载模型后尝试使用测试net.eval() net.eval() AttributeError：'_IncompatibleKeys‘对象没有属性’_IncompatibleKeys‘

浏览 3提问于2019-12-22得票数 1

回答已采纳

2回答

动画结束后，iPhoneSDK设置CALayer.transform不起作用

iphone、core-animation、calayer

我有一个CALayer对象。在viewDidLoad中:我使用layer.transform = CATransform3DRotate(CATransform3DIdentity, M_PI/8.0, 0, 0, 1);对它进行了转换加载后，我应用CAKeyframeAnimation来为该层的旋转设置动画效果。它也能正常工作，动画也能正确结束。为了防止层在完成后删除动画，我使用ani

浏览 1提问于2010-08-25得票数 0

回答已采纳

1回答

火花放电不可加载pipelineModel

python、pyspark

我遇到了一个问题，无法在实际环境中加载PipelineModel i测试我的模型，但是无法在生产环境中应用这个模型和代码。xdr_predict File "/usr/bch/1.5.0/spark/python/lib/pyspark.zip/pyspark/ml/ut

浏览 3提问于2021-12-03得票数 0

点击加载更多