清理数据和过滤系列

文章/答案/技术大牛

发布

1回答

python、pandas、nltk、data-analysis、stop-words

我正在分析Indeed的招聘信息的数据集。我的问题是过滤包含特殊字符的工作描述和抓取技能。result_series.filter(items=skills) filter_series.plot(kind='bar',figsize=(20,5)) 但是，我仍然可以抓取诸如“c++”、“ASP.NET”和“任何和所有的帮助都是感激的。

浏览 22提问于2020-08-07得票数 2

回答已采纳

1回答

矩阵的低通滤波

我正试着用R写一个低通滤波器，来清理一个“脏”的数据矩阵。r<-seq(0:36

浏览 0提问于2019-09-18得票数 1

2回答

如何删除标签列中对应的索引？

pandas、series

我有一个新闻数据集在清理阶段之后，我注意到3条新闻变成空的，我删除了它们，但我想删除标签列(系列熊猫)中的相应索引，以便两个系列的(清理和标签)变得相等，这样在分类的训练阶段划分时就不会出现这样的错误

浏览 14提问于2020-05-15得票数 0

1回答

清理或过滤数据

spark-streaming、flume

所以我想把这个过滤掉。提前谢谢。

浏览 2提问于2016-02-13得票数 0

2回答

PHP输入过滤使用新的5.2，想要从$_POST/GET更改，如何清理这些？

php、sql-injection、xss、input-filtering

我想使用新的PHP5>输入过滤来清理和验证发布的数据，我知道如何使用filter_input函数。但是我不知道我到底需要什么来清理数据库插入的数据&发送电子邮件。基本上，我想清理我的数据(不是验证，我知道怎么做)，这样我就可以安全地在我的后端处理(例如:防止sql注入，XSS等)。在这些过滤器中，我需要使用哪些过滤器来避开所有危险的数据。我假设我以与上面相同的方式使用

浏览 6提问于2011-08-26得票数 0

回答已采纳

1回答

使用柱状Pandas数据帧数据格式生成分层树结构

python、pandas、algorithm、dataframe、data-structures

如上所示，流程有多个级别，如名称和级别，其中L1是最高级别(第一步)。一些步骤是并发完成的，并让进程跟随它并分支到具有潜在子进程的多个并行进程中。我尝试过pd.melt()操作，以便将它们融合在一起，但这并不是实现它的最佳方法，因为每个进程级别(即，ProcessLevelXX和ProcessXXName)的两个列位于不同的列中，我希望将它们放在一起以实现层次结构有没有一种在Pandas中有效的算法来处理这些分布在多列中的分层数据，并且通过智能的Pandas操作我可以映射这些关系，或者b)我可以用来高效地计算和执行grou

浏览 13提问于2021-03-06得票数 0

1回答

我应该筛选或清理潜在的XSS输入值，还是只抛出异常

php、asp.net、security

我已经看过很多关于过滤和清理web表单输入值的文章和问题，以了解潜在的XSS问题。我的问题是。如果我们在数据中检测到XSS问题，那么我们不应该抛出异常，不允许请求进一步进行，而不是过滤或清理它吗？

浏览 6提问于2014-10-02得票数 0

3回答

什么时候清理数据？

data-cleaning

我对数据科学/ ML非常陌生，我认为这是一个非常基本的问题--什么时候“清理”数据？两者都有？在我的例子中的数据只是一系列的推特。

浏览 0提问于2018-04-24得票数 1

回答已采纳

4回答

最好的地方过滤输入？

php

我想知道哪里是过滤用户提交的输入最好的地方。关于过滤器，我说的是和。这些方法各有优缺点。方法1将净化后的数据传递给函数，因此函数

浏览 3提问于2012-04-05得票数 4

回答已采纳

2回答

在使用PHP PDO时，我是否应该对用户输入和输出进行清理/过滤？

php、mysql、pdo、sanitization、htmlspecialchars

我正在使用PDO进行用户输入，但现在我在显示MySQL数据库中的内容时还没有使用PDO (仍然是使用SQL命令的老式方法)。谢谢。

浏览 2提问于2012-04-13得票数 2

回答已采纳

1回答

清理和过滤日志消息

bash、unix

我目前有一个脚本，它获取一个包含当月审计数据的文件，并将其输出到另一个文件夹中，每天作为单独的日志文件。但是，我不需要将每条消息的每一位都输出到这些文件中。{ScheduleTemplate } {CompleteExeName 0} {ComponentType } {DirtyFlag 0} {UpdId 420} } {SeqId 286414} 和一行

浏览 15提问于2016-07-19得票数 0

1回答

通过对GSA中现有元数据的实体识别来提取内容

regex、search、google-search-appliance

当在GSA中使用实体识别时，它是只处理站点/文档的“内容”，还是也提取现有元数据的某些部分？我有一个元数据，我希望只提取与正则表达式匹配的元数据内容字段的特定部分。这可能与GSA实体识别有关吗？

浏览 1提问于2015-12-09得票数 0

3回答

zend框架清理数据

php、zend-framework、sanitization

我看过很多不同的评论，有些人说zend框架会自动清理post/get数据，但也有人说它不会。怎么回事？我在预派送中看到，在getParams上使用foreach是最快的方法，但是有谁有什么建议吗？

浏览 0提问于2010-11-03得票数 3

回答已采纳

2回答

SeriesCollection与FullSeriesCollection的差异

excel、vba

我正试图清理一些自动生成的代码，我在excel中的系列功能相当新。我的代码过滤了一些东西，然后设置图表的x轴值，所以它是这样做的： .ChartObjects("Voltage").Chart.FullSeriesCollection(1).XValues = "=Parametric_Sheet

浏览 0提问于2019-05-29得票数 2

回答已采纳

2回答

如何降低数据集中云点的噪声？

c#、algorithm、math、point-clouds、data-filtering

我在读取传感器上的数据。传感器给出一系列的点(x，y)。但是正如你在图像中所看到的，有很多噪音：我需要以过滤数据的方式清理数据，给出一些要点。我发现的所有自动库都是基于图像分析的，我认为它们不适用于这种情况，因为这是不同的，它们是数据集中的点(x，y)。我想做点的中位数，但当我尝试使用二维数组(这意味着ListOfPoints[[x,y],[x,y],[x,y],[x,y],[x,y],[x,y]])时，我不知道如何用for或while进行计算来迭代

浏览 4提问于2022-10-21得票数 0

1回答

R，删除未指定的因子级别。

r、tidyverse

我有一个非常草率，非常大的数据集，我正在努力清理。其中一栏标有“条款类型”，只应有6个值：“讨论”、“其他”、“队列分析”、“案例系列”、“案例研究”和"RCT“。它存在于原始数据中，我使用这段代码来指定以下内容：data<-data%>%mutate(`Article="1","Cohort Analysis"="2&q

浏览 1提问于2021-02-23得票数 1

回答已采纳

2回答

侦听表筛选器激活

vba、excel

我有一个表，它的顶部有一系列过滤器(像往常一样)。该表提供了一个包含多个系列数据的海量图形。为了隐藏不同的数据序列，我对表中的信息进行了分组。然后，我可以单击减号按钮，通过折叠组来从图表中删除一系列数据，或者单击加号按钮，以同样的方式将其添加回来。是的，我知道，不是最好的解决方案。这是一个早期的努力，我能说什么呢？我的默认设置是隐藏所有数据(所有组都折叠)。我有一个用户(一个非常重要的用户)，他希望能够使用顶部的过滤器来找到他们正在

浏览 3提问于2012-12-20得票数 0

回答已采纳

1回答

Hadoop映射减少从csv文件中提取特定列的csv格式

java、hadoop、file-io、mapreduce、bigdata

我是hadoop的新手，我从事一个大数据项目，在那里我必须清理和过滤给定的csv文件。就像给定的csv文件有200列一样，我只需要选择20个特定的列(所谓的数据过滤)作为进一步操作的输出。此外，作为数据清理的一部分，我必须检查日期列的正确日期格式，并将所有格式更改为单一格式，如DD-MM-YYYY。到目前为止，我能够读取给定的文件，但请您建议如何选择特定的列，以及检查日期格式？

浏览 2提问于2015-06-16得票数 0

回答已采纳

2回答

spring -如何将值从应用程序传递到筛选器

java、spring、servlet-filters

因此，我需要向spring应用程序添加一个过滤器，以便在将响应刷新回客户端之后，将其写入日志文件。我要写入日志文件的值是在应用程序中确定的。我可以想象，当请求第一次进入时，我可以在过滤器中实例化hashMap，将哈希图存储在某个地方(在哪里？)，在应用程序中检索它并写入它，然后在退出过滤器中再次检索它并写出值。这是最好的实践方法吗?如果是这样的话：2)在哪里存放我的<e

浏览 0提问于2010-11-09得票数 0

回答已采纳

1回答

区域范围系列的setDataCleaningThreshold

lightningchart

lineSeries.setDataCleaningThreshold(dcThreshold);但它不适用于区域范围系列在区域范围系列中也有setMaxPointCount，两者之间有什么区别？我的图表是渐进的，我想清除那些不在视图中的图表，并使图表faster.What是最好的方式？我能用处理方法吗？我看到了类似于轴心国鼠标和触摸事件的API是released.Can，您可以

浏览 2提问于2021-05-05得票数 2

回答已采纳

点击加载更多