使用pandas对多索引表上的数据进行规范化

python、pandas、dataframe、normalize

我有一个数据帧0 G1 G1 85762 G1 G3 8762O中的G1有1234个不同的成员，而D中的G1有4321个。如何使用pandas规范化上表

浏览 0提问于2017-11-26得票数 0

3回答

在mySQL中存储用户网站权限和查询的方法？

php、mysql

我所拥有的：如果我想选择所有是管理员和版主的用户，使用LIKE条件就会变得有点棘手。现在，如果我想要一个管理员，我只需要在所有用户中循环搜索1(使用PHP -低效)。我的解决方案是有效的，但如果用户增长到数百人，可能需要一段时间重复遍历所有

浏览 3提问于2010-12-28得票数 3

回答已采纳

3回答

优雅的数据库设计帮助...(MySQL/PHP)

php、mysql、database、database-design

我需要显示关于每部电影的信息，包括流派，演员，和许多信息(像IMDB.com一样)…这样，例如，如果一部电影有5个不同的流派，我就会得到‘genres2 movieID’表中5个不

浏览 2提问于2009-03-11得票数 3

回答已采纳

1回答

字段唯一值上的Solr方面

solr、facet

我在Solr中有一个类似如下的文档结构(不包括不相关的字段)：<field/> <field name="product_category" type="string" indexed="true" stored="true&qu

浏览 0提问于2010-08-18得票数 2

回答已采纳

2回答

对多索引数据帧中的值进行规范化？

pandas、dataframe、multi-index、normalize

如何对多索引数据帧进行规范化？","value1","value2"])d = (d-d.mean(axis=0))/data.std(axis=0, ddof=1) 但是我不能将它应用到我的数据帧的每个"nam

浏览 3提问于2013-07-16得票数 4

回答已采纳

1回答

优化从表中获取多行

mysql-5.7

，时间戳)上有一个索引。数据是一个json对象(3KB)，这个对象中有5个参数(除其他外)是定期获取的。表的大小大约是60 is和15,000,000行。每分钟记录每个资源id的数据。;为每个参数创建一个虚拟列，并为每个参数创建一个索引-- (resource_id，timestamp，pX)。这大大改善了查询，从70到8s (抓取6个月)，但我担心索引的数量减缓了我的插入。此外，

浏览 0提问于2022-08-18得票数 0

回答已采纳

1回答

使用多索引对pandas数据帧进行索引

pandas、multi-index

我有一个像这样的多索引数据框架： ? 我有以下多索引： MultiIndex([('2019-09', 1617), ('2019-09', 1619),2020-03', 3748), names=['creat

浏览 13提问于2020-12-22得票数 0

1回答

将所有关系聚合到一个表SQL Server中

sql-server、database、erd

我正在尝试设计一个企业级数据库架构。在ERD级别我有个问题。我的许多表都有彼此之间的关系。未来可能会有一些发展，我的设计应该是灵活的，并且在收集结果方面也应该快速。最近几天，我创建了一个名为Node的父表，我的所有功能表都与该表具有一对一的关系。(功能表是那些保存真实数据的表，如内容、用户、文件夹、角色...

浏览 33提问于2019-01-06得票数 0

3回答

如果我有压缩，为什么我还需要尺寸？

sql、sql-server-2008、ssas、data-warehouse、business-intelligence

通常，在设计数据仓库时，我们要么使用星型模型，要么使用雪花模型或混合模型，通常我们将主数据规范化为维度表(有时是为了性能考虑，非规范化)。，Server会找到字符串模式并保存在某处，行中只有指针，所以空间的使用理论上就像键一样。如果为了提高查询性能，然后用维度表，无论您在维度上有什么索引，您至少需要先搜索您的维度表才能得到密钥，然后使用<

浏览 3提问于2013-03-16得票数 1

2回答

这是我应该提交给Apple的bug，还是这是意料之中的行为？

objective-c、cocoa-touch、core-data

在使用CoreData时，以下多列索引谓词非常慢-- 26,000条记录几乎需要2秒。请注意，这两列都是索引的，我有意使用>和<=而不是beginswith进行查询，以使查询速度更快： NSPredicate *predicate = [NSPredicate predicateWithFormat，每列一个，然后合并结果，那么每个fetchRequest只需要1-2百分之一秒，合并列表(排序的列表)大约需要十分之一秒。这是CoreData

浏览 1提问于2011-02-25得票数 4

1回答

用于全文搜索的SQL Server索引视图

sql-server、full-text-search、indexed-view

我想使用Microsoft SQL Server的全文搜索功能。如果我有一个引用其他表(如City、Country、Department等)的表客户端，是更好地创建一个单独的表来保存非规范化数据，然后对这些数据进行全文索引，还是在每个外部表中创建一个虚拟值(例如，使用key -1 )，然后用那些相应的虚拟值替换

浏览 1提问于2010-08-15得票数 1

回答已采纳

4回答

使表真正变大的列数是多少？

sql-server、database-design

我的数据库中有两个表，一个用于登录，另一个用于用户详细信息(数据库不仅仅是两个表)。登录表有12列(Id、电子邮件、密码、PhoneNumber .)用户详细信息有23列(职务、城市、性别、ContactInfo ..)。这两张桌子是一对一的关系。我正在考虑创建一个包含两个表的列的表，但我不确定，因为这可能会使表的大小变大。这就引出了我

浏览 2提问于2015-08-06得票数 0

回答已采纳

1回答

对Solr的数据源输入进行非规范化

solr、lucene、denormalization

我有一个MySql数据库，需要将数据从该数据库提取到MySql中的多个表中。例如，我有一个“文章”表，它有一个“companyId”列。'companyIds‘链接到第二个表'company’中的'companyName‘。因此，为了能够使用Solr按公司名称查找文章，我需要在构建Solr索引时进行反规范化。做这件事最简单的方法是什么

浏览 0提问于2012-09-27得票数 1

1回答

在一大组列中搜索一大组令牌

sql、sql-server-2008

我试图返回给定列有一个子字符串的所有记录，该子字符串至少匹配一个非常大的令牌集的一个令牌。我搜索的列数量也相当大。做这件事最好的方法是什么？我知道最基本的方法是： (col1 LIKE '%token1%' OR col1 LIKE '%token2%' OR...OR ) 然而，这将是非常繁琐和庞大的。

浏览 1提问于2014-06-26得票数 1

回答已采纳

1回答

数据集中逐行归一化

python、pandas

我试图在-1，+1之间对数据表进行规范化，我编写的这段代码可以按列对列进行规范化。你能告诉我如何使逐行标准化吗？from sklearn import preprocessingdf = pd.read_csv('/-----.csv') df_max_scaled

浏览 14提问于2022-06-07得票数 0

1回答

ElasticSearch映射和相关对象

lucene、nosql、elasticsearch

请原谅这个问题的潜在n00bness --我仍然试图弄懂这些非关系型NoSQL的东西。让我们继续使用ElasticSearch在其文档中提供的Twitter示例。基本上，我们知道一条tweet属于一个用户，并且一个用户有很多tweet。如果我想以这种方式查询数据，我是否应该将所有用户数据都抛到tweet对象中？在我的实现中(不使用twitter，这只是一个优雅的示例)我需要将两个datasets作为不同的<

浏览 2提问于2012-02-28得票数 2

回答已采纳

2回答

这个数据库表应该标准化吗？

sql、database-design、database-schema、database-normalization

我已经接管了一个存储健身信息的数据库，我们正在就某一张桌子进行辩论，以及它是否应该保持为一张桌子，还是被分成三张桌子。今天，有一个名为：workout的表，它有以下字段所以如果我一天做2组3种不同的练习，我会在那一天的桌子上有6张记录。(日期、personid、exercise_id)，这是否应该标准化为三个表？WorkoutSets idworkout_exercise_id (外

浏览 1提问于2010-04-11得票数 4

回答已采纳

2回答

如何在Python中将JSON行数据拆分成多列

python、json、pandas、data-wrangling

我正在尝试找到一种在pandas中将JSON行数据拆分(扁平化)为多列的方法。我有一个数据帧，如下所示： Current Dataframe 以下是行的外观示例： Row example 我能够在单行上使用json_normalize函数来实现以下目标：(仅作为示例进行了简化)Code Example Table 但是，当尝试对整个dataframe应用规范化函数时，我得到'str‘对象没

浏览 161提问于2021-08-20得票数 2

4回答

用存储过程控制所有数据流的海量表的优缺点

sql-server、stored-procedures、datamodel

DBA (只有2年的google培训)已经创建了一个海量数据管理表(108列，并且还在不断增加)，其中包含系统中任何数据流的所有必要属性。我们简称这张表为BFT。10用于元数据引用。15用于数据源和时间跟踪用于多值数字更新的新/当前/增量/比率/范围列的10个实

浏览 0提问于2009-06-16得票数 0

回答已采纳

2回答

带Postgres的varchar列上带有distinct/group的慢速查询

database、performance、postgresql、indexing、query-optimization

我有一个company表和一个industry表，其中有一个多到多的关系表，将这两个表连接起来，名为company_industry。company表目前大约有750.000行。现在，我需要一个查询，为一个给定的行业找到所有独特的城市名称，其中至少有一家公司。因此，基本上，我必须找到所有与某一行业相关的公司，并为这些公司选择独特的城市名称。我可以编写这样做很好的<

浏览 6提问于2015-05-16得票数 3

回答已采纳

点击加载更多

扫码

添加站长进交流群

领取专属 10元无门槛券

手把手带您无忧上云

使用pandas对多索引表上的数据进行规范化

相关·内容