二十一世纪将迎来生物技术的时代&＃xff0c;但是没有谁能准确预测这一行业何时迎来爆发。在云计算、大数据等IT技术的支撑&＃xff0c;生物技术得到快速发展。InfoQ专访了华大科技云平台副总监陈钢&＃xff0c;同时作为QCon北京2014大会《大数据处理与大数据应用》专题的讲师&＃xff0c;陈钢将会分享数据分析技术如何在医疗健康领域发挥巨大作用。以下为专访全文&＃xff1a;
\u0026#xD;\n
InfoQ&＃xff1a;陈钢你好&＃xff0c;向InfoQ的读者和QCon的听众介绍下自己吧。
\u0026#xD;\n
陈钢&＃xff1a;大家好&＃xff0c;我是陈钢。2012年毕业于中南大学计算机系。之后一直深圳华大基因工作&＃xff0c;主要从事生物数据分析和相关技术平台搭建相关的工作。
\u0026#xD;\n
InfoQ&＃xff1a;你是什么时候开始学习编程的&＃xff0c;自己写的第一个程序是什么&＃xff1f;
\u0026#xD;\n
陈钢&＃xff1a;最早是读初中的时候写过很简单的Basic程序&＃xff0c;后来高中的时候学习过Visual Basic和文曲星上的编程。系统学习编程知识是在国防科大读大学的时候了。
\u0026#xD;\n
InfoQ&＃xff1a;你在国防科技大学读的专业是光电工程&＃xff0c;这似乎与你现在的研究方向毫无关系。有趣的是&＃xff0c;本科毕业后&＃xff0c;你选择了中南大学计算机专业。读硕士期间&＃xff0c;你还在清华大学生物信息学暑期学校学习。本科毕业后为什么选择计算机和生物信息专业&＃xff1f;
\u0026#xD;\n
陈钢&＃xff1a;众所周知&＃xff0c;国防科大的计算机专业非常强&＃xff0c;其实光学工程和电子通讯方面的专业也很强&＃xff0c;对学生要求很高。学到高年级的时候&＃xff0c;我发现我学习相关的专业课程非常费力了&＃xff0c;但当时对计算机方面的东西很感兴趣。本科阶段主要的计算机课程我都是课代表&＃xff0c;大四的时候偶尔跑去计算机专业蹭课。稍作纠结后就选择继续攻读计算机专业了。为了提高考研的成功率&＃xff0c;我选择了相对比较好考的中南大学计算机系。中南大学计算机系的整体实力跟国防科大相比有些差距&＃xff0c;但我很幸运地遇到了几位很好的导师。
\u0026#xD;\n
我最早遇到的导师是陈建二老师&＃xff0c;他当时在中南大学有参数计算和生物信息两个研究组。他给我介绍了两个研究方向的基本情况&＃xff0c;我其实听得似懂非懂。但觉着生物信息是个跨学科的方向&＃xff0c;觉着比较有意思&＃xff0c;就选择了这个方向。陈建二老师同时也把中南大学的王建新老师介绍给我。陈建二老师不在国内的时候&＃xff0c;就是王建新老师指导我的工作。
\u0026#xD;\n
那个时候对生物信息学不懂&＃xff0c;于是就找各种机会学习。清华大学的这个生物信息暑期班是教育部和国家自然科学基金委资助的&＃xff0c;当时在全国选了100多个研究生参加。现在这个暑期班上的同学还有很多工作在国内外的生物信息领域&＃xff0c;非常活跃。除了清华的这个暑期班&＃xff0c;我还参加过巴斯德研究院和香港大学在香港举办的一个EMBO资助的培训班&＃xff0c;获益很多。去年在EMBO的资助下&＃xff0c;华大基因在深圳也举办了大陆第一个这样的培训班。因为感激EMBO曾给予的资助&＃xff0c;所以我很积极的参与了组织和教学工作。
\u0026#xD;\n
读了两年硕士&＃xff0c;导师就建议直接转读博士学位了。后来潘毅老师也到中南大学指导我们的工作&＃xff0c;他在生物信息领域的经验进一步拓展了我对这个领域的认识。
\u0026#xD;\n
InfoQ&＃xff1a;在加入华大基因前&＃xff0c;你在思博奥科、中南大学和德克萨斯大学医学部Andrzej的实验室工作过&＃xff0c;谈谈这段经历。
\u0026#xD;\n
陈钢&＃xff1a;思博奥科是之前提到清华大学暑期班的一个同学创办的生物信息公司。研究生读到高年级后&＃xff0c;一方面是经济原因&＃xff0c;一方面也是想了解产业界生物信息的状况&＃xff0c;所以兼职做了一些生物信息的项目。
\u0026#xD;\n
中南大学的工作主要是管理学院的一个小型的HP集群&＃xff0c;这为我熟悉科学计算服务器的运维积累了一些经验。
\u0026#xD;\n
去到美国学习则是得益于国家留学基金委的资助。这个申请经历很有意思。在通过基本的审批后&＃xff0c;我就到Linkedin上相关的group去发消息&＃xff0c;说我得到了一些资助&＃xff0c;要去美国访问一年&＃xff0c;有没有这方面的PI&＃xff08;Principal Investigator&＃xff0c;科研项目负责人&＃xff09;需要人&＃xff1f;Andrzej发了邮件给我&＃xff0c;还主动提供了一些资助。于是我就去了。那一年在美国涨了很多见识&＃xff0c;也做了一些很有意思的工作。
\u0026#xD;\n
InfoQ&＃xff1a;你在博客上说&＃xff1a;“每一个跟我接触过的猎头都建议我不要来华大&＃xff0c;但我还是来了。对错我不知道&＃xff0c;但至少现在觉得这里是个符合我性格和喜好的地方”。现在看来&＃xff0c;选择华大基因是多么有远见的&＃xff0c;但当时还是很纠结的吧&＃xff1f;
\u0026#xD;\n
陈钢&＃xff1a;哈哈&＃xff0c;我依然不能确定这是不是一个很有远见的选择。这个领域发展得比IT和互联网还惊人&＃xff0c;我觉得任何人都很难做到有远见。
\u0026#xD;\n
当时猎头的建议倒不是我纠结的地方&＃xff0c;导师和家人建议我争取留校当老师倒让我很纠结。要知道&＃xff0c;国内高校的博士生&＃xff0c;所谓土博&＃xff0c;要直接进入重点大学任教是很不容易的。当时张饶学院士到中南大学任校长&＃xff0c;让人对中南大学的计算机学科抱以很高的期望。确实纠结了很久&＃xff0c;最终在我夫人的支持下&＃xff0c;还是觉得到外面去看看&＃xff0c;在学校呆得太久了。
\u0026#xD;\n
当然&＃xff0c;当时华大基因研究院的副院长&＃xff0c;现在华大科技的CEO李英睿同学的热情忽悠也是重要原因。
\u0026#xD;\n
InfoQ&＃xff1a;你折腾过各种开发工具和语言&＃xff0c;做技术书籍翻译&＃xff0c;还在Github上贡献&＃xff0c;你怎么做到精力如此旺盛&＃xff1f;
\u0026#xD;\n
陈钢&＃xff1a;我精力不旺盛&＃xff0c;我总是处于睡不够的状态。最早做技术书籍翻译是为了在读书时自己养活自己&＃xff0c;后来这变成了我的学习手段之一。Github上贡献非常不上档次&＃xff0c;就不说了。
\u0026#xD;\n
InfoQ&＃xff1a;你的博客上列出了一些R语言和Linux大牛。包括他们在内&＃xff0c;谁对你的影响最大&＃xff1f;
\u0026#xD;\n
陈钢&＃xff1a;还是家人对我的影响大一些。如果说科研方面的话&＃xff0c;读研期间的几位导师在研究方法和态度上对我产生了很大的影响。
\u0026#xD;\n
InfoQ&＃xff1a;你在设计软件架构时&＃xff0c;有自己一套方法或原则吗&＃xff1f;
\u0026#xD;\n
陈钢&＃xff1a;我并没有大型软件的架构设计经验&＃xff0c;方法和原则就谈不上了。平时干活&＃xff0c;坚持得比较多的原则是不重新发明轮子&＃xff0c;仅此而已。
\u0026#xD;\n
InfoQ&＃xff1a;你在《程序员》杂志的文章《生命科学中的大数据》解释了为什么生命科学越来越成为大数据驱动的科学&＃xff0c;在华大基因测序仪每天新增数十PB数据。仅仅搭建满足这一规模的基础设施平台就是很大的挑战。你认为在建立满足生命科学研究的基础设施与大数据平台&＃xff0c;面临哪些难点&＃xff1f;
\u0026#xD;\n
陈钢&＃xff1a;这个数字有问题&＃xff0c;华大基因大概是一年产生数十PB的数据。个人觉得&＃xff0c;跟常见的电商、社交、地质勘探等数据相比&＃xff0c;生命科学的数据有些特点&＃xff1a;
\u0026#xD;\n
- 产生成本很高&＃xff1a;一个人的全基因组测序的价格要数千美金&＃xff0c;表观组、蛋白质组、代谢组等其它组学数据的价格都很高&＃xff1b;\u0026#xD;\n
- 数据可靠性低&＃xff1a;以测序仪为代表的高通量生物实验技术产生的原始数据都是有系统性错误的&＃xff0c;这很麻烦。\u0026#xD;\n
- 数据不完整&＃xff1a;生物的转录组、代谢组等数据都是不断变换的&＃xff0c;受制于技术和成本&＃xff0c;不可能获得完整的数据。甚至基因组也会发生变化&＃xff0c;这是肿瘤的病因。但我们也很难检测到每个细胞的基因组。不完整的低分辨率的数据&＃xff0c;得到的结果往往是错误的。\u0026#xD;\n
- 数据的相关性高且不确定&＃xff1a;从实验中得到的诸如基因组、转录组等不同类型的数据之间是有很复杂的关系的&＃xff0c;但到底是什么关系&＃xff0c;我们不知道。甚至是只研究基因组&＃xff0c;不同的基因或基因组上不同的位点之间也有很复杂的关系&＃xff0c;但我们也不知道到底是什么关系。\u0026#xD;\n
生命科学数据的这些特点&＃xff0c;都会给面向生命科学研究和应用的IT基础设施带来诸多挑战。
\u0026#xD;\n
InfoQ&＃xff1a;R语言、Hadoop、Spark、AWS、Google的GCE&＃xff0c;类似Docker的虚拟化技术&＃xff0c;包括这些技术在内&＃xff0c;哪些技术将给生命科学研究更大的推力&＃xff1f;
\u0026#xD;\n
陈钢&＃xff1a;不知道。国外的生物信息领域吸收和利用最新IT技术的速度要比国内快很多&＃xff0c;国内更多的还在竞争仪器设备&＃xff0c;而不是IT技术和数据分析。
\u0026#xD;\n
InfoQ&＃xff1a;说说你将在QCon北京2014大会上的分享吧。
\u0026#xD;\n
陈钢&＃xff1a;讲点生命科学的研究和应用&＃xff0c;讲讲背后的基本算法和所利用的IT设施&＃xff0c;希望能忽悠一些高手投身这个行业&＃xff0c;加速这个行业的发展。
\u0026#xD;\n
InfoQ&＃xff1a;你觉得生物信息行业的机会来了吗&＃xff1f;学计算的同学不用一股脑往互联网巨头那里扎堆了&＃xff1f;
\u0026#xD;\n
陈钢&＃xff1a;机会是来了。年初&＃xff0c;Google给DNANexus做了1500万美元的C轮投资&＃xff0c;Seven Bridges的首轮融资应该也快了&＃xff0c;这是两家纯粹的生物信息公司。国内的生物信息公司还没有看到非常突出的&＃xff0c;但我相信很快就会有了。
\u0026#xD;\n
不过&＃xff0c;很早就有人说“21世纪是生物学的世纪”。这个行业什么时候爆发&＃xff0c;谁也不知道。
\u0026#xD;\n
InfoQ&＃xff1a;你曾说&＃xff0c;生命科学的发展正在从一个实验科学走向以数据驱动为主&＃xff0c;实验为辅的理论科学。用不了3年在国内就很火。这个市场到底有多大&＃xff1f;
\u0026#xD;\n
陈钢&＃xff1a;算不清。如果说是基于先进生物技术的医学健康市场&＃xff0c;按照华大基因研究院院长汪建的估计&＃xff0c;这是一个万亿级的市场。
\u0026#xD;\n
具体到生物信息。前面提到的Google投资的DNANexus的主要业务方向之一是医学诊断。随着实验技术的标准化&＃xff0c;各种医学健康的筛查和诊断会演变成数据分析的方法和基础设施的竞争&＃xff0c;这个市场的想象空间是无穷的。2月27日&＃xff0c;测序仪的国际巨头Illumina在北京大学附近开了一个第二代测序技术创新开发者大会&＃xff0c;吸引了很多这个行业的创业者和感兴趣的投资人。
\u0026#xD;\n
此专题详细信息&＃xff0c;请见专题页面。关于此次QCon北京其他专题的详细信息&＃xff0c;请移步至大会官网。
\u0026#xD;\n
需要特别注明的是&＃xff0c;每年QCon大会门票都会在开幕前售罄&＃xff0c;及早预定可提前确保席位&＃xff0c;并享受更低折扣。3月26日前报名参加可享受9折优惠。团体购票&＃xff08;5人及以上&＃xff09;将享有更多优惠。详请咨询qcon【at】cn.infoq.com&＃xff0c;或直接致电010-64738142。报名请点击报名页面。
京公网安备 11010802041100号