【直播】我的基因组(九):拿到数据后要做的事情

时隔好几个月,因为各种各样的原因数据终于拿到了自己的手上,真是不容易啊!

拿到数据后,第一件要做的事情就是检查数据传输的完整性,然后备份!我拿到的数据如下:

可以看到,公司给了我测序仪的下机数据(raw data)和他们质控后的clean data,这个过程减少了6G的数据量,对应着约90亿bp的碱基,相当于减少了3个人的全基因组数据。具体推算公式见前面的系列直播贴!

首先我把数据拷贝到了我上上周买的2T移动硬盘里面,再拷贝到我工作电脑一份,服务器一份,私人电脑一份,另外一个移动硬盘一份。然后删除了公司寄给我的硬盘里面的数据,再把硬盘寄回给公司,然后监督他们删除我所有的数据。(做这么多就是为了保护隐私,当然这个大前提是我已经确定数据没有问题了。)

检查数据传输的完整性就是md5校验,看看数据在拷贝过程中有没有意外的损坏(这个在之前下载数据的时候我也说过)!一般传输数据之前,会用md5命令来生成各个文件的md5值,就是下面的MD5.txt文件里面的内容,然后传输数据之后,需要自行用md5sum -c MD5.txt 来校验文件里面记录的文件的完整性,如果显示都是OK,说明文件拷贝传输过程是没有问题的!但这个过程会耗费大量的磁盘读写,磁盘读写能力是有限的,所以开多个进程并不能加快这一过程。

然后我把公司处理好的bam文件上传到服务器做下游分析,我用的winscp软件把文件传到服务器上的!

从明天起,我们就开始正式对基因组进行分析啦!欢迎围观!

文:Jimmy、吃瓜群众

图文编辑:吃瓜群众

(0)

相关推荐

  • 什么是数据的md5

    不论是从公司下载的原始数据,还是上传到GEO或者其他数据库的测序数据,由于数据比较大,我们不清楚,会不会由于网速或其他原因,导致数据传输失败.那么这时候,就需要有一个工具,能够证明我们下载/上传的数据 ...

  • 手机存储空间告急,来个偏方,成本三百元,立马扩容250GB

    曾几何时,我们的手机电池还是可以替换的,飞毛腿手机电池应该很多人都用过,曾几何时,我们的手机也是可以自由扩容的,仅仅需要一张TF卡,想怎么扩就这么扩--但在智能手机时代,这些都成为了历史.而在智能机时 ...

  • 智能与家 篇七:5G+8K时代的家用NAS QNAP威联通TS

    2019-06-21 15:11:40  目前很多家庭都在使用家用NAS,这种本地存储但能够云访问的储存方式,由于安全性较高因而得到了很多家庭的认可.家用NAS多用于储存照片和视频文件,而目前主流的家 ...

  • Linux命令小实践

    当拿到公司的硬盘数据以后,需要检查数据传输的完整性,然后备份! 公司返回的数据包括测序仪的原始下机数据(Raw data)和过滤后数据(Clean data). 检查数据传输的完整性就是md5校验,看 ...

  • 怎样从电脑下载监控视频到华为等手机上观看?

    先把监控视频复制到电脑硬盘上,然后电脑上网联网,同时登陆微信,QQ等可以电脑硬盘文件和手机文件传输功能,把电脑上视频监控用微信传输到手机上观看保存等. 1.首先确定录像机是电脑还是嵌入式设计,如果是电 ...

  • 教学管理菜鸟成长记8-独孤九剑之数据透视表中集

    键词:Excel2016,数据透视表,工作表拆分,操作难度** 工作场景:话说昨天小菜学会独孤九剑前三式后,工作效率大大提升,教务处王处长看着这个小同志好像工作不累,扔过来一个各系部教学检查汇总表,要 ...

  • 淘宝直播爆流黑科技运营一个月后的数据对比分析

    流量获取的成本越来越高,想要做好直播间,提升免费流量,我们需要研究淘宝的数据直播,围绕核心指标做好数据提升.淘宝的直播能力诊断从开播.流量.观看.转粉.成交5个能力项得分来判断账号的表现.根据核心指标 ...

  • 亚马逊直播的趋势,2021年最新数据

    跨境电商亚马逊平台以售卖书籍起家,在1995年由杰夫贝佐斯所创立,亚马逊发展至今,成为全球最大最全的零售商,其成长有目共睹,其创始人更是个人财富高达1157亿美元,个人财富榜上响当当的人物:想是我国的 ...

  • 如何实现微信直播的一屏九动互动模式

    最近微信直播非常火爆,借助微信强大的客户基础,直播间的热度也是非常高的.那打造微信直播一屏九动模式是非常有效的一种方式,下面就让我们来看看如何打造一屏九动吧: 1.实现屏幕右下角的点赞互动.这点相对比 ...

  • 亚马逊九大站点数据对比:发展现状、营收状况、类目占比

    前不久亚马逊悄悄开放了中东站,随着中东站点Souq.com的开放,亚马逊全球站点又多了一个,新站点的增加势必会吸引更多新卖家入驻.在越来越多卖家涌入平台的大势下,其它各站点现状如何?本篇将通过多个维度 ...

  • 王叁寿再因九次方大数据收限消令,陷债务纠纷占用群兴玩具3亿元还剩2.1亿元未还

    蓝鲸财经旗下,专注互联网金融领域独家报道,大大集团.中晋.快鹿.链家金融.海通布局互金等独家线索均已10万+并引起大量媒体跟进.蓝鲸是重要财经资讯门户+财经记者工作平台,拥有150家媒体传播资源,每天 ...

  • 直播回顾|手把手教你搭建数据指标体系

    在产品和运营的工作中,我们会接触不同的数据.不同的指标.很多时候我们做的数据,都是针对单个点的层面去做,而最终显示出来的数据往往比较零散,无法串联起来,发现全局的问题.而指标体系化,则是将零散的数据串 ...

  • 梦幻西游:玩家直播打造一车九眼,第一件回本,第二件血赚!

    打造宝宝装备在梦幻西游里面是一个比较冷门的玩法,大家都去玩打造人物装备了,只有一些平民玩家才玩得起宝宝装备.虽然宝宝装备的打造没有像打造人物装备那样,可以鉴定出价值不菲的无级别,但打造宝宝装备一样有机 ...

  • 【直播我的基因组66:大多数性状往往是多个基因控制的

    前面我们说到了那些简单的由单个基因决定的性状,这东西不需要预测,其中的生物学机制已经研究的非常透彻,只要拿到你的基因信息,很容易推断你的性状,比如人的乙醇脱氢酶和乙醛脱氢酶等多种乙醇代谢基因,你本身是 ...