我在spark上运行了xgboost，然后遇到了AttributeError: 'XGBoostClassifier' object has no attribute 'booster' def train_modelxgboost]) featureScoreMap = xgb_model.booster.getFeatureScore() 如何获取xgboost4j的特征重要性？
浏览 63提问于2020-07-07得票数 0
回答已采纳
如何为XGBoost分类器设置最佳阈值？算法中使用的默认值为0.5。我想知道有没有什么特性/内置函数可以用来改变这一点。
浏览 5提问于2020-01-09得票数 0
我有一个RDD，它的元素是ml.dmlc.xgboost4j.LabeledPoint，比如
org.apache.spark.rdd.RDD[ml.dmlc.xgboost4j.LabeledPoint另外:我只能在spark1.5中使用xgboost4j -v0.5，所以一些新版本的功能不能使用。
浏览 3提问于2017-11-17得票数 0
我尝试在spark 2.0.1和Dataset API中使用xgboost4j。到目前为止，我通过使用model.transform(testData)获得了以下格式的预测root
|-- label: double (nullable我如何将预测映射到正确的格式呢？提出了一个类似的问题，但我无法让它为我工作。到目前为止，我还不能成功地将xgboost4j集成到管道中。
浏览 1提问于2016-11-10得票数 1
回答已采纳
1回答
我正在开发一个使用xgboost4j的spark应用程序。
由于jar的本地C依赖关系，这个包需要编译到本地架构。但是集群的架构与开发膝上型电脑不同。当通过集群运行sbt程序集时，如何替换包？
浏览 4提问于2016-11-24得票数 2
回答已采纳
是否可以将pyspark数据帧传递给XGBClassifer，如下所示：model1 = XGBClassifier()如果不是，那么将pyspark dataframe应用到xgboost的最佳方式是什么？
浏览 0提问于2019-12-20得票数 0
3回答
我是ml的新手，我正在使用Spark ML构建一个预测系统。我读到特征工程的一个主要部分是找到每个特征在进行所需预测时的重要性。在我的问题中，我有三个分类特征和两个字符串特征。一切都很好，除了我如何确定每个特性的重要性？我知道我现在只有几个功能，但我很快会添加更多的功能。我遇到的最接近的是带有spark ml模块的ChiSqSelector，但它似乎只适用于分类功能。
浏览 1提问于2016-08-22得票数 1
我在这里运行示例代码来训练xgboost模型：https://xgboost.readthedocs.io/en/latest/jvm/xgboost4j_spark_tutorial.html 我已经在集群中安装了以下jar文件：https://mvnrepository.com/artifact/ml.dmlc/xgboost4j-spark/0.90 https://mvnrepository.com/a
浏览 90提问于2021-09-08得票数 1
在尝试将功能重要性矢量从lightGBM getfeatureImportances压缩到列名数组时，我遇到了以下错误：}value toAr
浏览 29提问于2019-08-19得票数 1
回答已采纳
我有一个需求，需要找到ANN实现中使用的属性的相对重要性。我使用spark库MultiLayerPerceptron来实现。这个模型给了我一个向量，它是一个权重数组。我知道有一些算法可以从权重推导出相对重要性，但是MLib实现给出了一个大的一维数组，并且没有告诉任何与每个输入对应的权重。有人知道如何获得每个输入节点对应的权重吗？
浏览 5提问于2016-01-13得票数 4
1回答
我想知道我是否可以在Google Dataflow平台上直接缓存数据集(就像在Spark中缓存RDDs一样)。如果没有这样的功能，Dataflow如何在应用程序中挑选热门数据集，特别是当您有多个热门数据集，并且您希望根据数据集的重要性来确定缓存的优先级时？
浏览 1提问于2017-09-02得票数 2
1回答
在使用SciKitLearn的随机森林分类器对模型进行拟合后，我得到了特征重要性列表，但我能否获得特征级别的重要性。例如，如果我得到以下功能重要性的系列，我如何才能看到哪个day_of_week是最重要的？
浏览 15提问于2021-02-20得票数 1
回答已采纳
我正在尝试估计我手头的分类任务的特征重要性。对我来说，重要的是获得代表每个特征重要性的具体数字，而不仅仅是“挑选最重要的X个特征”。显而易见的选择是使用基于树的方法，它提供了很好的feature_importances_方法来获取每个特征的重要性。但我对基于树的分类器的结果并不满意。我了解到SelectFromModel方法能够根据重要性分数消除不重要的特征，并成功地对支持向量机或线性模型做到了这一点。我想知道，有没有办法从SelectFromModel获得每个功能的特
浏览 8提问于2017-07-26得票数 2
回答已采纳
我正在使用随机森林从Sklearn的特点的重要性。然而，特征的重要性可能通过改变射频中的random_state参数而改变。我想知道是否有任何方法来获得强大的功能重要性与射频？
浏览 2提问于2020-02-11得票数 0
回答已采纳
我正在尝试提取我使用PySpark训练的随机森林对象的特征重要性。但是，我在文档中没有看到这样做的示例，也不是RandomForestModel的方法。如何在PySpark中从RandomForestModel回归器或分类器中提取特征重要性？
以下是文档中提供的示例代码，用于帮助我们入门；但是，其中并没有提到特性的重要性。
浏览 2提问于2015-03-11得票数 16
我正在尝试使用Spark2.1.1在Scala2.11中获得XGBoost模型的特性重要性。到目前为止，我的代码如下
(...)
浏览 2提问于2017-10-20得票数 3
我是spark流媒体的新手。想了解UpdateStateByKey操作的重要性吗？它有什么用呢？存储任意状态的必要性是什么？它是如何工作的？
浏览 14提问于2017-12-21得票数 0
我目前正在使用XGBoost4j。要使用它，我必须使用向量汇编程序来转换我的训练数据。以下是我的问题：为了避免上述情况，我还尝试使用以下代码来转换我的培训数据：
val feature_col = array(testing.drop("cust_xref_id",cust_xref_id").cast(StringType) ,feature_col).map(r => (r.getAs[Double](0), r.get
浏览 3提问于2020-07-20得票数 1
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
云直播
对象存储
腾讯会议活动推荐
腾讯云开发者
