TE 注释工具EDTA的安装及使用

EDTA(Extensive de novo TE Annotator)是一个可以从头注释全基因组中的TE并且评估已有TE库注释优劣的工具包。该工具的主要步骤是过滤掉原始TE中注释错误的,从而注释出全基因组中较高质量的非冗余TE库。工具包中的一些程序的选择只是基于水稻基因组中人工校正的TE库,可能对其他基因组并不是很合适。因此,在其他基因组中使用该工具包时应该特别注意。

image

作者使用了水稻基因组(TIGR7/MSU7版本)中的一个修正过的TE注释版本(v6.9.5)来进行了测试。

安装(更新)

主要有4种方法,可以任选其一。

使用conda快速安装

conda install -c bioconda edta

使用Singularity快速安装(适合在集群使用)

安装

singularity build --sandbox EDTA.sif docker://kapeel/edta

使用

singularity exec {path}/EDTA.sif /EDTA/EDTA.pl --genome genome.fa [other parameters]

{path} is the path you build the EDTA singularity image

使用Docker快速安装(适合root用户)

安装

docker pull kapeel/edta

使用

docker run kapeel/edta --genome genome.fa [other parameters]

使用conda分步安装

conda create -n EDTA
conda activate EDTA
conda config --env --add channels anaconda --add channels conda-forge --add channels bioconda
conda install -n EDTA -y cd-hit repeatmodeler muscle mdust blast java-jdk perl perl-text-soundex multiprocess regex tensorflow=1.14.0 keras=2.2.4 scikit-learn=0.19.0 biopython pandas glob2 python=3.6 tesorter genericrepeatfinder genometools-genometools ltr_retriever ltr_finder
git clone https://github.com/oushujun/EDTA
./EDTA/EDTA.pl

输入文件

必须

FASTA格式的基因组文件(序列名不多于15个字符,且为简单字符,如字母,数字或下划线)

可选

  • 该物种或相关物种的编码序列(FASTA格式)。该文件有助于去除TE库中的基因序列。
  • 该版本基因组组装结果的基因位置文件(BED格式)。TE注释过程中将会过滤该文件中的基因位置信息,从而避免注释错误。
  • 该物种修正版的TE库。其中的序列也没必要是全部修正过的TE,部分修正过的也可以使用。

输出文件

$genome.mod.EDTA.TElib.fa:非冗余的TE库。如果在输入文件中提供了修正版的TE库,则该文件中也将包含这部分序列。

其他输出文件

  • $genome.mod.EDTA.TElib.novel.fa: 新TE类型. 该文件中包括输入的修正版的TE库中没有的TE序列(需要--curatedlib参数).
  • $genome.mod.EDTA.TEanno.gff: 全基因组TE的注释. 该文件包括结构完整和结构不完整的TE的注释(需要--anno 1参数).
  • $genome.mod.EDTA.TEanno.sum: 对全基因组TE注释的总结(需要--anno 1参数).
  • $genome.mod.MAKER.masked: 低阈值TE的屏蔽.该文件中仅包括长TE(>= 1 kb)序列(需要--anno 1参数).
  • $genome.mod.EDTA.TE.fa.stat.redun.sum: 简单TE的注释偏差(需要--evaluate 1参数).
  • $genome.mod.EDTA.TE.fa.stat.nested.sum:嵌套型TE注释的偏差(需要--evaluate 1参数).
  • $genome.mod.EDTA.TE.fa.stat.all.sum: 注释偏差的概述(需要--evaluate 1参数).

使用方法

详细参数说明

perl EDTA.pl [options]
  -genome   [File]  The genome FASTA
  -species [Rice|Maize|others]  Specify the species for identification of TIR candidates. Default: others
  -step [all|filter|final|anno] Specify which steps you want to run EDTA.
            all: run the entire pipeline (default)
            filter: start from raw TEs to the end.
            final: start from filtered TEs to finalizing the run.
            anno: perform whole-genome annotation/analysis after TE library construction.
  -overwrite    [0|1]   If previous results are found, decide to overwrite (1, rerun) or not (0, default).
  -cds  [File]  Provide a FASTA file containing the coding sequence (no introns, UTRs, nor TEs) of this genome or its close relative.
  -curatedlib   [file]  Provided a curated library to keep consistant naming and classification for known TEs.
            All TEs in this file will be trusted 100%, so please ONLY provide MANUALLY CURATED ones here.
            This option is not mandatory. It's totally OK if no file is provided (default).
  -sensitive    [0|1]   Use RepeatModeler to identify remaining TEs (1) or not (0, default).
            This step is very slow and MAY help to recover some TEs.
  -anno [0|1]   Perform (1) or not perform (0, default) whole-genome TE annotation after TE library construction.
  -evaluate [0|1]   Evaluate (1) classification consistency of the TE annotation. (-anno 1 required). Default: 0.
            This step is slow and does not affect the annotation result.
  -exclude  [File]  Exclude bed format regions from TE annotation. Default: undef. (-anno 1 required).
  -threads|-t   [int]   Number of theads to run this script (default: 4)
  -help|-h  Display this help info

1. 生成基因组中的原始的TE库

对于不同的TE类型,可以分别指定-type ltr|tir|mite|helitron来运行,如果是想要所有类型的TE,直接指定-type all就可以。
这里使用示例数据水稻基因组来进行测试,下载位置rice genome

perl /raid8/cuixb/tools/biosoft/EDTA/EDTA_raw.pl -genome rice_genome.fasta -species Rice -threads 6

2. 完成其他分析

这里可以通过指定-overwrite 0来使软件自动识别文件夹下的已有分析结果。

perl EDTA.pl -overwrite 0 -genome rice_genome.fasta -species Rice 

对已有的TE库进行评估

如果你已经有了一个TE库,想对该TE库的注释效果与其他方法比较,那么可以进行如下两步分析:

对你的基因组根据已有的TE库进行注释

以水稻为例:

RepeatMasker -pa 36 -q -no_is -norna -nolow -div 40 -lib custom.TE.lib.fasta -cutoff 225 rice_genome.fasta

测试某一TE类型的注释效果

perl lib-test.pl -genome genome.fasta -std genome.stdlib.RM.out -tst genome.testlib.RM.out -cat [options]
    -genome [file]  FASTA format genome sequence
    -std    [file]  RepeatMasker .out file of the standard library
    -tst    [file]  RepeatMasker .out file of the test library
    -cat    [string]    Testing TE category. Use one of LTR|nonLTR|LINE|SINE|TIR|MITE|Helitron|Total|Classified
    -N  [0|1]   Include Ns in total length of the genome. Defaule: 0 (not include Ns).
    -unknown    [0|1]   Include unknown annotations to the testing category. This should be used when
                    the test library has no classification and you assume they all belong to the
                    target category specified by -cat. Default: 0 (not include unknowns)

例如:

perl lib-test.pl -genome rice_genome.fasta -std ./EDTA/database/Rice_MSU7.fasta.std6.9.5.out -tst rice_genome.fasta.test.out -cat LTR

更好的阅读体验可移步这里

参考

  1. Ou, Shujun & Su, Weijia & Liao, Yi & Chougule, Kapeel & Peterson, Thomas & Jiang, Ning & Hirsch, Candice & Hufford, Matthew. (2019). Benchmarking Transposable Element Annotation Methods for Creation of a Streamlined, Comprehensive Pipeline. 10.1101/657890.
  2. EDTA Github
最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 205,132评论 6 478
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 87,802评论 2 381
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 151,566评论 0 338
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,858评论 1 277
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,867评论 5 368
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,695评论 1 282
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,064评论 3 399
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,705评论 0 258
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 42,915评论 1 300
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,677评论 2 323
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,796评论 1 333
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,432评论 4 322
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,041评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,992评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,223评论 1 260
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 45,185评论 2 352
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,535评论 2 343

推荐阅读更多精彩内容