前期处理

  • perl脚本统计RC(RC(read counts))
  • 读入control baseline 和 sigma(最后baseline 预测的mad值)
  • 将gc < 0.28或gc > 0.68,sigma乘上1.5,后来又乘以6,对于小于0.01或者大于0.99分位数,sigma取0.01和0.99分位点的sigma
  • 将sigma转化为权重,SigmaForWeights = 1/sigma2/max(1/sigmaforWeithts2)
  • 根据mu值设置一些outlier的amplicon,threshold为-2和2
  • 如果1/3 amplicon都是NA,该样品被抛弃

文库大小校正,(中位数校正),GC含量校正,长度校正,ICA校正

  • 文库大小校正,(中位数校正),GC含量校正,长度校正,多了一步中位数校正,将NRC除以总的NRC值的中位数,作用是一开始对于0拷贝数进行校正
  • ICA标准化:取control样品中的ICA1,ICA2,ICA3使用rlm建立线性模型求残差作为标准化 后的值,对于值为0的logNRC,取最小logNRC

segmentByCBS

  • 输入标准化后的各个amplicon的染色体,起始位置,logNRC和权重(SigmaForWeights),使用PSCBS中segmentByCBS(内部调用DNAcopy包)函数进行片段划分。划分时,sigma越大权重越小,来避免断点判定在sigma较大的amplicon。输出是每个segment对应的拷贝数

输出如下,如果该染色体中存在NA的数据,会保留一行NA的值

   sampleName chromosome     start       end nbrOfLoci    mean
1 <NA> 1 2488068 244006378 1363 0.0934
2 <NA> NA NA NA NA NA
3 <NA> 2 5833035 234681120 1008 0.0732
4 <NA> NA NA NA NA NA
5 <NA> 3 3192502 195622096 939 0.0718
6 <NA> NA NA NA NA NA
7 <NA> 4 1800963 153332857 423 0.0313
8 <NA> NA NA NA NA NA
9 <NA> 5 223515 180058652 574 -0.3460
10 <NA> NA NA NA NA NA
11 <NA> 6 393195 167275553 1378 0.0588
12 <NA> NA NA NA NA NA
13 <NA> 7 2946229 152373106 945 0.0507
14 <NA> NA NA NA NA NA
15 <NA> 8 30915961 145742416 852 0.0803
16 <NA> NA NA NA NA NA
17 <NA> 9 5021975 5072501 21 -0.1446
18 <NA> 9 5072501 134100903 474 -0.3635
19 <NA> 9 134100903 139438447 156 0.0474

predictCluster,,确定zero(copy number 0对应的logNRC)和copy number。注:这里求出的copy number并不是生物意义的copynumber 而是是否出现拷贝数异常,0为未出现拷贝数异常

  • 将每个segment内的amplicon乘以权重求中位值得到权重后得到的weighted.median segmean,如果无法求出weighted.median,取wighted.mean作为segmean
  • 原理:对应着相同copy数的segmean应该聚类在一起
  • 因为直接取segmean进行聚类可能会聚类错误,因此对数据添加高斯噪音:

     第一步,求出需要添加的sdError:取出在-2和2之间的amplicon(并且排除x和y染色体),将amplicon的logNRC - segmean得到errors,对每一段segment的errors求方差,得到该段sdNoise,再将sdNoisd比上该段amplicon长度开根得到sdError,公式为:sdError = sd(logNRC - segmean)/sqrt(n),可以理解为sdError = ((logNRC - segmean) - mean(logNRC - segmean))^2/sqrt( n(segment)*n(in each segment) )

     第二步,添加噪音,噪音的均值为0,方差为sdError,每个ampliocn 的值a = segmean + rnorm(n(in each segment),0,sdError)
  • 使用mcluser聚类

    如果聚类结果大于1类,将该所有类别的方差取出,将异常簇给值NA,异常cluster判断方法:每个cluster都有一个对应的标准差(sigma),标准差大于中位cluster sigma加上7*mad(sigma)
  • 计算每个cluster的density

    计算方法:计算该cluster(高斯模型)的density,等于每个cluster(全部高斯模型)的均值在这个cluster下的density的总和再乘以这个cluster的density比重。而每个cluster的density = dnorm(x,mean of cluster,var of cluster) * proportion of cluster
  • 将最大density的cluster作为zero copy number
  • 将最近的一个cluster(如果mean值差<0.04)两个cluster乘比重后的均值赋给该cluster(zero),该cluster比重变为这两个cluster相加

  • 检测预测时处于边缘的值

    如果同一个amplicon a 对应的copy number mad值为0.5,那么a所对应的amplicon copy number 为1,如果同一个amplicon a 对应的copy number mad值为-0.5,那么a所对应的amplicon copy number 为-1

    如果常染色体只有1个cluster,那么分析x,y染色体,如果segmean < log(0.75),该amplicon copy number 给-1,如果segmean > log(1.25),amplicon copy number给1
  • 求出maxloss 和 maingain

    maxloss:

    copy number是-1的amplicon的segmean,

    copy number 是0 的amcplion segmean -(copy number是0的amplicon segmean - mean(copy number 是 -1的 amplicon segmean ))/2

    在上述中取最大值

    mingain:

    copy number是1的amplicon的segmean,

    copy number 是0 的amcplion segmean +(mean(copy number 是 1的 amplicon segmean )-copy number是0的amplicon segmean)/2

    在上述中取最小值
  • 将x和y染色体segmean > mingain ,copy number赋予1,将x和y染色体segmean < maxloss,copy number 赋予-1
  • 对predictCluster进行八次,取最小的zero值的一次,然后取出zero和预测的copy number

计算生物意义的copy number

  • ratio = logNRC - zero,减去zero值(copy number 0 的cluster的均值)
  • 如果存在正常细胞污染的比例,那么减去这部分的影响: ratio = log((exp(ratio)-normalContamination)/(1-normalContamination))
  • 求出copy number 0的amplicon求mad值,作为全部的标准差(sample sigma),所有amplicon的control sigma * sample sigma作为校正后的方差
  • 将每个segment内的amplicon ratio乘以权重求中位值得到权重后得到的weighted.median segmean,如果无法求出weighted.median,取wighted.mean作为segmean
  • copy number计算方法

按照segment进行fixed variance test和t test

  • fixed variance test

    ratio 应服从N(0,sigma),对segment内的amplicon ratio 进行转换,(logNRC-0)/sigma应该服从N(0,1),根据中心极限定理,mean((logNRC-0)/sigma)服从N(0,1/sqrt(n)),计算该segment的mean((logNRC-0)/sigma)在N(0,1/sqrt(n))双尾的p值
  • t test

    (logNRC-0)/sigma应该服从N(0,1),对每个amplicon进行t test

    如果fixed variance test > 0.01 或者t test > 0.01,copy number赋予2

    CNV:copy >= 3 : Gain,copy = 2.5:PotentialGain,copy < 1:Loss,copy = 1.5:PotentialLoss

检测segment的outlier

(ratio- segmean)/sigma在N(0,1)双尾的p值

ratio/sigma在N(0,1)双尾的p值

取两者之中较大的p值作为该amplicon的outlier p值

所有的amplicon outlier值采用fdr方法计算q值

对于outlier q值<0.01的点加上注释,outlier p值,outlier copy number采用round(exp(values[tt])*4)/2

按照基因进行t test

  • 对每个基因使用t检验,理论上 ratio/sample sigma/control sigma,服从均值为0的分布,如果p值<0.01,对每个基因copynumber进行估计(perGeneEvaluation)
  • 如果基因计算的结果不等于segment的结果,并且断点不在基因内,ratio - segmean / (control sigma * sample sigma)应服从1/sqrt(n)正态分布,作t检验,如果t检验显著,predLarge Corrected给perGeneEvaluation
  • 如果断点在基因内,以第一个segmean(fragratio)作为参考,如果出现segmean不一样,将下一个amplicon segmean值改为参考segmean
  • 对每个基因内的ratio - segmean(fragratio)/(control sigma * sample sigma),作t检验,取出最大的p值作为基因内所有amplicon的pvalRatioCorrected
  • 但如果基因内存在copy number = 2 的amplicon,判断是否存在round(exp(fragratio)*4)/2 = 2,如果有从这些amplicon中取出p值最大的p值作为基因内所有amplicon的pvalRatioCorrected
  • 如果该p值>0.05,说明全部点都被该fragratio解释了
  • 如果p值<0.05,说明不能全部解释,对每个fragratios相同的amplicon取出,将它们ratio/(control sigma * sample sigma)作t检验,如果最小值>0.01,那么pergeneEvaluation=2

参考资料

ONCOCNV文献:https://academic.oup.com/bioinformatics/article/30/24/3443/2422154

ONCOCNV代码:http://boevalab.com/ONCOCNV/

ONCOCNV软件思路分析之tumor处理的更多相关文章

  1. ONCOCNV软件思路分析之control处理

    进行数据初步处理(perl) 统计amplicon的RC(read counts),并且相互overlap大于75%的amplicon合并起来 统计每个amplicon的GC含量,均值, 性别识别并校 ...

  2. 福州大学软件工程1816 | W班 第10次作业[个人作业——软件产品案例分析]

    作业链接 个人作业--软件产品案例分析 评分细则 本次个人项目分数由两部分组成(课堂得分(老师/助教占比60%,学生占比40%)满分40分+博客分满分60分) 课堂得分和博客得分表 评分统计图 千帆竞 ...

  3. 书评第003篇:《0day安全:软件漏洞分析技术(第2版)》

    本书基本信息 丛书名:安全技术大系 作者:王清(主编),张东辉.周浩.王继刚.赵双(编著) 出版社:电子工业出版社 出版时间:2011-6-1 ISBN:9787121133961 版次:1 页数:7 ...

  4. laravel中间件的创建思路分析

    网上有很多解析laravel中间件的实现原理,但是不知道有没有读者在读的时候不明白,作者是怎么想到要用array_reduce函数的? 本文从自己的角度出发,模拟了如果我是作者,我是怎么实现这个中间件 ...

  5. 软件案例分析——VS、VS Code

    软件案例分析--VS和VS Code 第一部分 调研,测评 一.使用10–30分钟这个软件的基本功能(请上传使用软件的照片) VS code Visual Studio 二.主要功能和目标用户有何不同 ...

  6. 软件产品案例分析--K米

    软件产品案例分析--K米 第一部分 调研,评测 评测 个人第一次上手体验 使用的第一款点歌软件,以为就是个遥控而已,使用后发现功能还挺多,能点挺久.觉得很方便,不用挤成一堆点歌了.K米的脸蛋(UI)好 ...

  7. 团队项目2.0软件改进分析MathAPP

    软件改进分析 在此基础上,进行软件的改进. 首先,我们把这个软件理解成一个投入市场的.帮助小朋友进行算术运算练习的APP. 从质量保证的角度,有哪些需要改进的BUG? 从用户的角度(把自己当成小学生或 ...

  8. [团队项目2.0]软件改进分析MathAPP

    软件改进分析 在此基础上,进行软件的改进. 首先,我们把这个软件理解成一个投入市场的.帮助小朋友进行算术运算练习的APP. 从质量保证的角度,有哪些需要改进的BUG? 从用户的角度(把自己当成小学生或 ...

  9. 第五周课后作业——热门软件创新分析+附加题1&附加题3

    鉴于我们寝室都热衷于手游,所以本次热门软件创新分析我就来分析一下几款热门的抽卡型手游.   阴阳师(后文简称YYS)——剧情画风唯美,配音引人入胜 作为网易公司研发的一款3D日式和风回合制游戏,YYS ...

随机推荐

  1. es随想二

    一.es运行状态的监控 es长时间批量入库时,需要对入库的性能进行监控,否则可能导致es重启,入库任务失败. 可以编写shell脚本,每分钟用cat命令监控pending的数量,数量逐渐增大时就需要注 ...

  2. BZOJ 3551: [ONTAK2010]Peaks加强版 [Kruskal重构树 dfs序 主席树]

    3551: [ONTAK2010]Peaks加强版 题意:带权图,多组询问与一个点通过边权\(\le lim\)的边连通的点中点权k大值,强制在线 PoPoQQQ大爷题解传送门 说一下感受: 容易发现 ...

  3. BZOJ 3143: [Hnoi2013]游走 [概率DP 高斯消元]

    一个无向连通图,顶点从1编号到N,边从1编号到M. 小Z在该图上进行随机游走,初始时小Z在1号顶点,每一步小Z以相等的概率随机选 择当前顶点的某条边,沿着这条边走到下一个顶点,获得等于这条边的编号的分 ...

  4. verilog实验3:AD转换后串口输出到PC端

    一.实验任务 通过tcl549AD转换芯片将模拟电压信号转换为数字信号,并通过串口显示到电脑上.此AD转换芯片为串行转换芯片,且转换速率要和串口选择的速率匹配.等待串口发送完后,再进行下一次AD转换. ...

  5. solr-搭建与使用过程中问题总结-链接

    以下错误可以确定在CDH版本Hbase集群+Lily hbase indexer+solrCloud的环境中可以解决,有开源版本解决成功案例的请在下方评论. 1.If you see this err ...

  6. LeetCode - 596. Classes More Than 5 Students

    There is a table courses with columns: student and class Please list out all classes which have more ...

  7. MySQL绿色版安装

    下载MySQL绿色版 去官方下载mysql.,我下载的是 mysql-5.6.27-winx64,下载后解压缩到D:盘. 安装MySQL服务 拷贝my-default.ini重命名为my.ini,修改 ...

  8. 浅显总结ASCII Unicode UTF-8的区别

    如果觉得此地排版不好,欢迎访问我的博客 浅显总结ASCII Unicode UTF-8的区别 制作表单时,为了追求更好的用户交互体验,常常会有提示性的内容,比如提醒用户字符的限制.由于英文,中文字符的 ...

  9. linux下双网卡的绑定

    如果服务器上有两快网卡就可以把它绑定为一块虚拟的网卡,如果一块网卡坏了另一块还可以继续工作,增加了冗余度和负载,具体做法如下: 新建一个虚拟的网卡,命令如下: iv /etc/sysconfig/ne ...

  10. 前端回答从输入URL到页面展示都经历了些什么

    浏览器和服务器涉及大量网络通信内容,此处做了弱化介绍,作为前端主要关注第四部分.一. 网络环境保障我们先假定我们访问的URL为www.abc.com并且地址不在局域网内:首先我们所处的局域网的总路由应 ...