R data.table按组排序，每组底部有"other“ - 腾讯云开发者社区

在这篇文章中，我们将比较Pandas 和data.table，这两个库是Python和R最长用的数据分析包。我们不会说那个一个更好，我们这里的重点是演示这两个库如何为数据处理提供高效和灵活的方法。...我们还可以按升序或降序对结果进行排序。...我们使用计数函数来获得每组房屋的数量。”。N”可作为data.table中的count函数。默认情况下，这两个库都按升序对结果排序。排序规则在pandas中的ascending参数控制。...如果你有什么反馈，请告诉我。...//towardsdatascience.com/5-examples-to-compare-python-pandas-and-r-data-table-27b43402ae6a deephub翻译组

3K3 0

「R」data.table 包功能特性学习

# 3: C ## 4: A ## 5: B ## 6: C ## 7: A ## 8: B ## 9: C ## 10: A ## 11: B ## 12: C 按组对列进行计算操作...# 对V1的每一组计算V4的和 DT[, ....[1] 52 # 对A,C分别求和 DT[c("A", "C"), sum(V4), by=.EACHI] ## V2 V1 ## 1: A 22 ## 2: C 30 # 设定键，先按V1排序然后按...分组求V4列的和 DT2 <- DT[, ....(V4.sum=sum(V4)), by=V1] # 选择和>40的行 DT2[V4.sum>40] ## V1 V4.sum ## 1: 2 42 # 按V1分组，V1排序计算V4和

1.9K1 0

您找到你想要的搜索结果了吗？

是的

没有找到

R语言︱数据集分组、筛选(plit – apply – combine模式、dplyr、data.table)

R语言︱数据集分组大型数据集通常是高度结构化的，结构使得我们可以按不同的方式分组，有时候我们需要关注单个组的数据片断，有时需要聚合不同组内的信息，并相互比较。...3.aggregate函数对分组字段的顺序有一个奇怪的要求：必须反向排列。...在base包里和split功能接近的函数有cut(对属性数据分划)，strsplit(对字符串分划)以及subset（对向量，矩阵或数据框按给定条件取子集）等。...5、which定位函数功能：返回服从条件的观测所在位置（行数），有一定的排序功能在其中。...（参考来源：R高效数据处理包dplyr和data.table，你选哪个？） ?

20.5K3 2

R练习50题 - 第一期

写在前面从这期开始，大猫课堂将会推出一个新的系列：R练习50题，目的是使用50道练习题让大家掌握常用的数据操作，例如寻找每组最大的N个观测等。...值得说明的有一下几点：数据集为“面板数据”：包含多个股票（横截面），而每个股票则有多个按照日期排序的变量（时间序列）股票代码symbol 和日期date共同组成了数据集的key，也即每个唯一的symbol...首先按照题意，我们需要为每个交易日date建立一个“组”。其次，对于每个组，我们需要生成两个统计数字：一个统计上涨的个数，一个统计下跌的个数。最终结果如下： ?...(date, updown)这个结构，他的意思是，把整个数据集按照date和updown两个变量进行分组，并依次排序。...由于在keyby语句中我们已经按照日期与涨跌进行了分组，所以这一步我们只需要统计每个组有多少个股票就可以了。我们在这里使用了uniqueN这个函数。

2.4K4 0

数据流编程教程：R语言与DataFrame

在实际使用中，data.talbe::fread()的读取速度可以比原生的read.csv有3-10倍的提升速度。...filter(): 按行名称分片 slice(): 按行索引分片 mutate(): 在原数据集最后一列追加一些数据集 summarise(): 每组聚合为一个小数量的汇总统计，通常结合gruop_by...()使用 arrange(): 按行排序（2）关联表查询 inner_join(x, y): 匹配 x + y left_join(x, y): 所有 x + 匹配 y semi_join(x, y)...DataFrame优化 1. data.table 众所周知，data.frame的几个缺点有： (1)大数据集打印缓慢 (2)内部搜索缓慢 (3)语法复杂 (4)缺乏内部的聚合操作针对这几个问题，data.table...DataFrame可视化 DT包是谢溢辉老师的大作，为data frame数据提供了非常好的可视化功能，并且提供了筛选、分页、排序、搜索等数据查询操作。九.

3.8K12 0

R练习50题 - 第六期

本题主要在于理解题意，并利用排序和分组计算。首先理解题意：计算观测时间内每个行业每天股票的数量，求每个行业股票数量的均值，而后按从大到小排序。...接下来以日期date和行业industry进行分组，最后在每组中以amount最大值除以amount最小值：times = amount[1]/amount[.N]。...注：在此处有一个data.table的小技巧，i中的排序和选择的操作的在代码中分成了两步，这是因为这两个部分不能够以order(date, industry, -amount) & amount > 0...line 4 在删除tag = "other"的这些观测之后，用dcast将表进行变形，把观测值max10%和min10%变成两个变量名，而后在这两个变量名下填充ret_aver的观测值：dcast(....大猫的微信号是： iRoss2007 村长的微信号及B站主页是： ravin515 http://space.bilibili.com/40771572 大猫的R语言课堂关注R语言、数据挖掘以及经济金融学

5325 0

「R」数据操作（三）：高效的data.table

接「R」数据操作（一）和「R」数据操作（二）使用data.table包操作数据 data.table包提供了一个加强版的data.frame，它运行效率极高，而且能够处理适合内存的大数据集，它使用[]...id name #> 1: T01 SupCar #> 2: M01 JeepX #> 3: M02 AircraftX #> 4: M03 Runner 提供排序索引可以对记录排序...我们可以将多个[]按顺序连接起来，形成工作流（类似管道%>%）。...一般data.table会保持原来的顺序返回，有时候我们想要设定排序，keyby也可以实现，所以是一举两得： type_class_test = product_info[product_tests][...下面代码没有按组聚合数据，而是画了每年的价格图： oldpar = par(mfrow = c(1, 2)) market_data[, { plot(price ~ date, type =

5.9K2 0

如何在CDSW中使用R绘制直方图

] [xss6nl7z7g.jpeg] 3.编写R绘制直方图代码 ## 加载R运行依赖包 library(ggplot2) library(gcookbook) library(data.table)...1","2","3","4","5","6","7","8"), labels=c("0~15","15~30","30~45","45~60","60~75","75~100","100~","other...---- 编写R绘制饼图代码 ## 加载R运行依赖包 library(ggplot2) library(gcookbook) library(data.table) library(DBI) library...数据集 VDT <- data.table(tabledata) ## 用order()让数据框的数据按 scope 列数据从大到小排序 VDT = VDT[order(VDT$scope, decreasing...= TRUE),] ## 将数字1替换为"0~15"方式 myLabel = c("0~15","15~30","30~45","45~60","60~75","75~100","100~","other

3.3K10 0

「Workshop」第五期：使用data.table操作数据

data.table 查看代码[1] data.table的基本框架 ?...banana 3 6 4: banana 4 1 5: orange 5 3 6: orange 6 6 对行 i 进行操作按条件选择行...按相同的列内容进行data.table组合 ?...读取或写出文件 fread(".csv", select = c("a","b")) 读取.csv或.tsv格式的文件，可以选择特定列读取 fwrite(dt, ".csv") 输出R环境中名为...grape l 6 73: peach h 3 44: peach l 8 9 参考资料 [1] 查看代码: showcase.R

3.3K5 0

R︱高效数据操作——data.table包（实战心得、dplyr对比、key灵活用法、数据合并）

key变量重新排序。...2、按条件行筛选从前用subset的方式进行筛选比较多， new=14,select=a:f) （1）单变量现在data.table与dplyr from_dplyr =...—————————————————————————————————————————————— 三、数据排序有了key,其实有了一定排序功能在里面。...(x)] 还有 data$x 如果有很多名字很长的指标，data.table中如果按列进行遍历呢？ data[,1]是不行的，选中列的方式是用列名。...参考文献：些许案例，代码参考自以下博客，感谢你们的辛勤： 1、R语言data.table简介 2、超高性能数据处理包data.table 3、R语言data.table速查手册 4、R高效数据处理包

7.5K4 3

R语言数据分析利器data.table包 —— 数据框结构处理精讲

版权声明：本文为博主原创文章，转载请注明出处 R语言data.table包是自带包data.frame的升级版，用于数据框格式数据的处理，最大的特点快。...将一个R对象转化为data.table，R可以时矢量，列表，data.frame等，keep.rownames决定是否保留行名或者列表名，默认FALSE,如果TRUE,将行名存在"rn"行中，keep.rownames...data.table为了加快速度，会直接在对象地址修改，因此如果需要就要在修改前copy，直接修改的命令有:=添加一列，set系列命令比如下面提到的setattr,setnames,setorder等；...#取第二行 DT[2:3] #取第二到第三行 DT[order(x)] #将DT按照X列排序，简化操作,另外排序也可以setkey(DT,x)，出来的DT就已经是按照x列排序的了。...参考文献 data.table包manual：https://cran.r-project.org/web/packages/data.table/data.table.pdf

5.6K2 0

分析GSEA通路中的上下调基因

GSEA分是根据处理后的差异倍数值对基因进行从大到小排序, 用来表示基因在两组间的表达量变化趋势。排序之后的基因列表其顶部可看做是上调的差异基因，其底部是下调的差异基因。...可用于判断某条通路在某组样本中是激活还是抑制！...) tmp= fread(fs[1],data.table = F) View(tmp) gid=fread(fs[1],data.table = F)[,1] head(gid) rawcount =...countData = rawcount,colData = colData,design = ~ group_list) #第二步，进行差异表达分析 dds2 <- DESeq(dds) #提取差异分析结果，trt组对...untrt组的差异分析结果 tmp <- results(dds2,contrast=c("group_list","KD","control")) DEG_DESeq2 <- as.data.frame

8333 0

优雅整理Python中的import

（最后导入自定义模块）属于同一组的导入语句按字母顺序排列。 You should put a blank line between each group of imports....（每组导入之间有一个空行） isort的作用使用isort可以自动将Python模块中的import语句进行排序，并自动按类型分类，满足以上所说的PEP8规范。...isort 之后： import json # 第一组为标准模块同一组按字母顺序排序 import os import time # 每组之间空一行 from bs4 import BeautifulSoup...# 第二组为第三方模块同一组按字母顺序排序 from django.conf import settings from django.core.serializers import json from...同一组按字母顺序排序 from web.forms.manage_form import ArticleModelForm from web.utils.pagination import Pagination

1.3K3 0

能不能让R按行处理数据？

事实上，这些问题也就是你在“看懂一本R的教材”和“成为R大神”之间的距离。大猫除了进行翻译，也会在其中增加一些相关知识点，相信掌握了这些问题，一定会对你的研究工作大有裨益。 1....这些问题大多数涉及到用data.table包处理数据。data.table是目前R中人气最高的数据处理包。 2....如果要自己寻找Stackoverflow上与R或是data.table相关的问题，可以在搜索栏输入[R] [data.table] Your question。提出问题好啦，开始上课！...首先，假设我有一个这样的数据集（暂且命名为t1）： ? 现在我想做的是对于每一行，找出非NA的值，填充到“mean.scale”这个新的变量；如果有多个非NA，那么就计算其平均值。...我们只要把数据按照fund_name分组，然后对每组求scale的均值。唯一需要注意的有两点。首先，别忘了mean中的na.rm = T参数，它能够让函数忽略缺失值。

1.3K2 0

R海拾遗--data.table初级学习

data.table初级学习概述 data.table对于大数据的数据整理较为便捷，很多的时候比data.frame效率更高，一般情况下结合管道符号进行计算管道符 %in% 表示包含 %>% 表示向右传递...%$% 表示向右传递并直接按列操作安装 install.packages("data.table") install.packages("magrittr") library(magrittr) library...# 列名 names(iris) # 选取列 iris[ , Species] # 返回一组向量 iris[ , ....(Species)] #返回一个data.table iris[, c("Species"), with=FALSE] #返回一组数据框 # 保留多列 iris[, ....置好key后，data.table会将数据按照key来排序 setkey(iris, Species) iris[c("setosa", "virginica")] 结束语来不及解释，时间来不及了，今天就简单这样吧

7463 0

多个基因集富集结果泡泡图绘制展示

与单组富集结果相比，最大的改动就在：新增的Group列而非 log_odds_ratio列作为横轴(X-axis)信息提交后获得结果。图中每个点代表一个富集的条目，在Y轴有对应标记。...每一列是一组基因的富集结果。三组共有的富集在最上面，2组共有的富集在中间，每组特有的富集在底部。每个点的大小代表用于分析的基因集中匹配到该通路的基因数目，颜色代表富集程度。...图中每个点代表一个富集的条目，在Y轴有对应标记。...这些条目按其log_odds_ratio的值排序后展示，log_odds_ratio高的条目在Y轴上方展示；每个点的大小代表用于分析的基因集中匹配到该通路的基因数目，颜色代表富集程度。...点的形状则代表其所属的组信息。但是这个图出现了一个问题，图例显示不全。最简单的解决办法就是把图的宽度和高度调大。结果就正常了，可以下载PDF版、PPT版（如果选了参数）和对应的R代码

8771 0

【R语言】dplyr对数据分组取各组前几行

top_n这个函数来输出每个组的前五行，wt是排序的依据，根据校正之后的p值来排序，n=-5是按从小到大排序。...如果n=5，是按从大到小排序。...会根据指定的p.adjust有小到大排序，然后取每组前5行方法五、使用group_modify结合head #使用group_modify r5=GO_result %>% group_by(ONTOLOGY...GO富集分析的结果，默认是会根据校正之后的p值（p.adjust）来由小到大排序，所以基于这个结果，直接取每组的前五行就是最显著的5个条目。...如果GO富集结果默认没有按p.adjust排过序，那么就需要选择带有排序的方法，如top_n和slice_min。

1.6K2 1

和CNS学画图：OR指数比较单细胞亚群的组织偏好

对单细胞数据进行亚群注释之后，我们往往想比较某亚群，例如CD8Tex，是倾向于分布在实验组还是对照组，例如癌组织，癌旁组织，转移癌组织，淋巴组织？这时候有很多策略去做这种多组间的比较。...Therapy-Induced Evolution of Human Lung Cancer Revealed by Single-Cell RNA Sequencing》这篇Cell的做法，这篇文章有三种处理组...，它画不出所有样本分布的散点图，因为本质上作者把同一组的亚群看成一个样本。...P-values were adjusted using the BH method implemented in the R function p.adjust....图表复现下面利用作者给的meta.data数据和代码计算OR值：有一些R包需要提前安装一下： library("sscVis") library("data.table") library("grid

4.1K2 0

MR应知应会：MungeSumstats包

该软件包还使用户能够灵活地将重新格式化的文件导出为制表符分隔的 VCF 或 R 本机对象，例如 data.table、GRanges 或 VRanges 对象。...为什么要反复强调A1&A2，因为很多时候Allele1—— the Effect Allele；Allele2——the other Allele，这与此包相反。...sort_coordinates是否按结果 sumstats 的坐标排序。 nThread用于并行进程的线程数。 write_vcf是否写入 VCF (TRUE) 或表格文件 (FALSE)。...要返回的对象类型（“data.table”、“vranges”、“granges”）。...mapping_file MungeSumstats 有一个预定义的列名映射文件，该文件应涵盖最常见的列标题及其解释。

1.1K1 0

HDOJ 1716 排列2（next_permutation函数）

0]<<" "<<list[1]<<" "<<list[2]<<endl; //输出: 1 2 3 例题： Problem B Time Limit : 1000/1000ms (Java/Other...) Memory Limit : 32768/32768K (Java/Other) Total Submission(s) : 27 Accepted Submission(s) : 10 Problem...Description Ray又对数字的列产生了兴趣：现有四张卡片，用这四张卡片能排列出很多不同的4位数，要求按从小到大的顺序输出这些4位数。...Input 每组数据占一行，代表四张卡片上的数字（0<=数字<=9），如果四张卡片都是0，则输入结束。...Output 对每组卡片按从小到大的顺序输出所有能由这四张卡片组成的4位数，千位数字相同的在同一行，同一行中每个四位数间用空格分隔。每组输出数据间空一行，最后一组数据后面没有空行。

3552 0

点击加载更多

扫码

添加站长进交流群

领取专属 10元无门槛券

手把手带您无忧上云

5个例子比较Python Pandas 和R data.table

「R」data.table 包功能特性学习

R语言︱数据集分组、筛选(plit – apply – combine模式、dplyr、data.table)

R练习50题 - 第一期

数据流编程教程：R语言与DataFrame

R练习50题 - 第六期

「R」数据操作（三）：高效的data.table

如何在CDSW中使用R绘制直方图

「Workshop」第五期：使用data.table操作数据

R︱高效数据操作——data.table包（实战心得、dplyr对比、key灵活用法、数据合并）

R语言数据分析利器data.table包 —— 数据框结构处理精讲

分析GSEA通路中的上下调基因

优雅整理Python中的import

能不能让R按行处理数据？

R海拾遗--data.table初级学习

多个基因集富集结果泡泡图绘制展示

【R语言】dplyr对数据分组取各组前几行

和CNS学画图：OR指数比较单细胞亚群的组织偏好

MR应知应会：MungeSumstats包

HDOJ 1716 排列2（next_permutation函数）

扫码

相关资讯

热门标签

活动推荐

运营活动

社区

活动

资源

关于

腾讯云开发者

热门产品

热门推荐

更多推荐