如何确定在异常值检测中要删除哪些输入？
在异常值检测中，确定要删除哪些输入通常需要考虑以下几个因素：
- 数据分布：首先，需要对数据进行分析，了解数据的分布情况。可以使用统计方法、可视化工具等来观察数据的分布特征，如均值、方差、偏度、峰度等。异常值通常是与数据分布明显不符的数据点。
- 领域知识：了解所处理数据的领域知识是非常重要的。根据领域知识，可以判断哪些数值是不可能或不合理的，从而确定异常值。
- 统计方法：常用的统计方法包括Z-score、箱线图等。Z-score可以通过计算数据点与均值之间的偏差来判断异常值，一般认为Z-score大于3或小于-3的数据点为异常值。箱线图可以通过观察数据的上下四分位数、中位数等来判断异常值。
- 业务需求：根据具体业务需求，可以确定哪些异常值是需要删除的。有些异常值可能是真实存在的特殊情况，需要保留；而有些异常值可能是数据采集或处理过程中的错误，需要删除。
综上所述，确定在异常值检测中要删除哪些输入需要综合考虑数据分布、领域知识、统计方法和业务需求等因素。根据具体情况，可以选择合适的方法来判断和删除异常值。
腾讯云相关产品和产品介绍链接地址：
- 数据分析与挖掘平台（https://cloud.tencent.com/product/dap）
- 人工智能平台（https://cloud.tencent.com/product/ai）
- 数据库 TencentDB（https://cloud.tencent.com/product/cdb）
- 弹性MapReduce（https://cloud.tencent.com/product/emr）
- 弹性MapReduce for Apache Hadoop（https://cloud.tencent.com/product/emr-hadoop）
- 弹性MapReduce for Apache Spark（https://cloud.tencent.com/product/emr-spark）
相关·内容
1回答
我使用隔离森林模型来检测一些异常值，并进行形状图来查看这些异常值的顶部特征。 我的目标是:不仅要检测异常数据，还要找出要删除的输入。 我想知道有什么方法可以尝试实现我的目标吗？我正在考虑使用shap值作为删除输入的阈值，但我不知道如何应用这个想法。希望你能给我一些建议和解决方案。谢谢!
浏览 13提问于2021-09-20得票数 0
2回答
如何确定哪些元素不正常并删除它们(本例中为数字3)。我不想对列表进行排序，但要检测异常值并删除它们。另一个例子是：我希望能够删除#4和#7，这样我就可以结束：当您有这样的场景时，也会出现一个问题我希望数组只包括跟随一般趋势线和删除任何异常值的值。我只是想知道是否有一个简单的方法可以做到这一点。
浏览 2提问于2015-08-26得票数 3
回答已采纳
我正在使用influence()命令来检测异常值。然后，我必须删除异常值的研究，指出这一行。事情是这样的:我有250项研究，我不想手动计算行数，以知道要排除哪些研究。------------------------------------
现在，我想知道如何更改打印结果，使其看起来如下：input_out1 <-input[-19,]
print(i
浏览 1提问于2016-06-08得票数 1
当我将HDD/SSD实际安装在安装支架中时，我可以单击Windows 7的“设备管理器”中的“扫描硬件更改”来检测HDD/SSD。现在，在Ubuntu18.04中我要怎么做呢？我的意思是，在不重新启动Ubuntu的情况下，如何检测HDD/SSD？通过IDE和SATA，我可以输入什么命令来检测HDD/SSD？通过IDE或SATA，我可以<
浏览 0提问于2018-07-12得票数 2
回答已采纳
1回答
我有一个图形用户界面，用户将画一个数字(左边的数字)，当用户点击“猜测”按钮时，绘图被转换为400×470图像，然后缩小到20×20图像，然后以28×28图像为中心，输入到右边输出的网络中。下面是GUI的样子：
然而，我的问题是，当我有一个数字没有占据面板的大部分(如上面的图像中的3)，被用作网络输入的缩小图像太小，这导致网络错误地猜测。下面是当数字被画得很小时的最终输入图像：
以下是数字大绘制时的最终输入图像：
我要问的是:是否有办法使绘制的数字与绘制的数字相同大小，
浏览 0提问于2019-08-06得票数 0
回答已采纳
2回答
但是，如果数据集是由多个维度的数据组成的，那么如何检测和删除异常值呢？尽管随机生成的目标数据值在IQR范围内，但从回归得到的其他特征数据值可能存在于IQR范围之外；因此，使孤立
浏览 0提问于2021-10-20得票数 0
这里有三组数据，当每幅图返回到左边时，我想删除它的部分和右端。我真的不知道该怎么表达。应该很简单但我真的被困住了。提前感谢！
浏览 4提问于2021-04-21得票数 3
回答已采纳
3回答
，有哪些方法可以预测时间序列？我还尝试了简单地删除异常值(因此，再次运行数据集10次，每次删除一个异常值，直到第10个数据集中的10个都删除)。我只想指出，删除这些大订单并不会完全删除数据点，因为该季度还发生了其他交易
我的代码通过多个预测模型(输出样本上的ARIMA加权、输入样本上的ARIMA加权、加性Holt-winters加权和乘性Holt-winters一旦使用某些命令检测到异常值，
浏览 5提问于2015-04-13得票数 22
在boxplot中，我将选项outline=FALSE设置为删除异常值。我知道如何删除异常值，但是outline选项在boxplot内部使用了哪些设置？遗憾的是，手册没有作出任何澄清。
浏览 9提问于2014-11-20得票数 5
回答已采纳
我遇到的一个问题是，我在算法中使用的异常值检测方法似乎不适用于行少于10行的数据。dfn=df[(np.abs(stats.zscore(df['Temperature']))<4)]/true_divideMetodo3in.py:20:
浏览 3提问于2020-06-17得票数 1
回答已采纳
我有很多列的表，我想使用单个select查询删除数据中的所有逗号示例：
REPLACE([Pay-to City], ','
浏览 2提问于2019-07-09得票数 0
1回答
我有两个模型DestinationEntity和SourceEntity，我想要的是，我需要先获取目标详细信息，之后我需要获取源详细信息，因为我想选择多个目标，并将这两个都保存为单独的CRUD条目，如何实现这一点
浏览 0提问于2018-11-09得票数 0
1回答
我对ML很陌生，我想要构建一个系统来检测我从客户那里接收到的输入数据中的错误或异常。数据是在具有不同列名的sql表中构造的。每个列的值类型各不相同，但最常见的是数字、字符串和日期。这些表中的一些值将是错误的。输入数据可以驻留在数百个表中，每个表有几十或数百列。这意味着手动遍历数据结构是一项艰巨的任务。我的目标是建立一个系统，它只需查看一列中的数据，就可以检测数据类型并自动识别异常值。现在，我已经开始使用Python了
浏览 5提问于2022-11-29得票数 -3
回答已采纳
我也不知道原因awk '{ printf "%s", $0 }' inputFile如何在linux中删除行尾的CRLF(\r\n)的特定组合？我希望删除行尾的CRLF(\r\n)。tr不会工作，因为tr要删除的外观不一定在行尾，并且管理员要求不安装dos2unix。在我的例子中，sed 's/\r\n$/
浏览 0提问于2016-05-12得票数 2
在中，您可以创建一个多边形，然后单击它并弹出菜单显示。有三个按钮:编辑，删除和选择一个颜色。如何检测事件并确定在弹出菜单中执行了哪些事件--删除或编辑？当其中一个事件被执行时，我想要执行一些操作，例如当一个多边形被编辑或删除时。function (evt) { // do something when polygon is deleted
});
浏览 2提问于2017-10-21得票数 1
回答已采纳
我们可以使用声明性的方法来使用kubectl apply -f来创建和更新kubernetes资源，我们如何在回收不再需要的资源方面做到同样的事情。我曾经使用过kubectl delete，但这看起来是必要的，有时我们需要按正确的顺序删除。例如，我们决定不向最终用户提供K8S API，而是为他们提供一个存储库，让他们保存和更新它们的yaml文件，在每次合并请求时，bot
浏览 2提问于2018-10-15得票数 3
回答已采纳
11回答
当我做这些数据的箱形图(X轴上的年龄，Y轴上的美容评分)时，在每个框的胡须之外绘制了一些异常值。
我想从数据框本身中删除这些异常值，但我不确定R如何计算其箱形图的异常值。
浏览 2提问于2011-01-25得票数 107
回答已采纳
1回答
我想删除字符串中以"a“开头的所有单词。string <- "This is a sentence about nothing."我要的产出：我不知道如何根据一个字母进行检测，但在整个单词上执行操作(例如，删除、替换)。任何输入都是非常感谢的！
浏览 2提问于2022-02-09得票数 0
回答已采纳
1回答
我的目标是创建一个sent，它侦听工作区中一个通道内发送的每一条消息，并检测/删除文本中有脏话或脏话的任何消息。机器人被安装到工作区中，并且应该拥有启动和运行所需的一切。我还用glitch.com创建了一个项目，并连接了这个应用程序，这样我就可以输入任何所需的Bolt编码，但我不知道如何让Bot真正开始读取消息，以及如何设置一个触发词列表，以便它知道要删除哪些垃圾信息。
浏览 3提问于2022-08-01得票数 0
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM活动推荐
腾讯云开发者
