前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >RNA-Seq数据用aspera高效批量下载(万事开头难)

RNA-Seq数据用aspera高效批量下载(万事开头难)

作者头像
生信技能树
发布2020-09-24 10:58:44
2.9K0
发布2020-09-24 10:58:44
举报
文章被收录于专栏:生信技能树生信技能树

学徒和学员已经陆续出师,是时候把生信技能树的舞台交给后辈了!

下面是《2019年中秋节广州站》学员的分享

学完了生信技能树的转录组课程,是时候实战一波了,我选择的是 NCBI数据集是SRP033333

  • Description KPC (Comparing mutant-p53 expressing cells to knockdown cells) Total Samples 6

下载数据

由于是EBI数据库,用wget下载速度太慢,Jimmy大神强烈建议用aspera工具下载,于是参考生信技能树教程代码,首先需要熟悉GEO和SRA数据库:

然后参考:使用ebi数据库直接下载fastq测序数据 , 需要自行配置好,然后去EBI里面搜索到的 fq.txt 路径文件。使用conda安装aspera

代码语言:javascript
复制
conda create -n download 
conda activate download 
conda install -y -c hcc aspera-cli
conda install -y -c bioconda sra-tools
which ascp 
## 一定要搞清楚你的软件被conda安装在哪
ls -lh ~/miniconda3/etc/asperaweb_id_dsa.openssh

我用EBI主页搜索SRR号搜索到项目链接,下载fastq或sra数据,这里就直接下载fq数据。

单个样本fq下载

找到单个样本的链接很容易:

(base) vip31@tpm2-WD12:~/RNA_Seq/sra$ ascp -QT -l 300m -P33001 -i ~/.aspera/connect/etc/asperaweb_id_dsa.openssh era-fasp@fasp.sra.ebi.ac.uk:/vol1/fastq/SRR103/003/SRR1039773/SRR1039773_1.fastq.gz ~/RNA_Seq/sra/

批量下载(需先获得fq数据地址列表)

需要进行如下操作:

这样就拿到了如下所示的全部下载链接,可以使用循环进行批量下载啦:

  • 批量循环代码,需要注意格式,具体参考代码

cat filereport_read_run_PRJNA229893_tsv.txt | while read id; do ascp -QT -l 300m -P33001 -i ~/.aspera/connect/etc/asperaweb_id_dsa.openssh era-fasp@$id ~/RNA_Seq/sra/; done

  • 数据较多等待时间比较长,可以nohup后台下载,方法总比困难多

nohup cat filereport_read_run_PRJNA229893_tsv.txt | while read id; do ascp -QT -l 300m -P33001 -i ~/.aspera/connect/etc/asperaweb_id_dsa.openssh era-fasp@$id ~/RNA_Seq/sra/; done &

数据下载完成

万里长征第一步终于搞定,看教程很容易,自己操作困难重重,还好有jimmy老师团队倾心相助。

本文参与 腾讯云自媒体分享计划,分享自微信公众号。
原始发表:2020-09-21,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 生信技能树 微信公众号,前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体分享计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
目录
  • 下载数据
    • 批量下载(需先获得fq数据地址列表)
    相关产品与服务
    数据库
    云数据库为企业提供了完善的关系型数据库、非关系型数据库、分析型数据库和数据库生态工具。您可以通过产品选择和组合搭建,轻松实现高可靠、高可用性、高性能等数据库需求。云数据库服务也可大幅减少您的运维工作量,更专注于业务发展,让企业一站式享受数据上云及分布式架构的技术红利!
    领券
    问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档