技术变化太快，程序员咋办？从AdobeFlash想到那些年我幸运躲过的MFC和塞班

随着年龄越来越大&＃xff0c;越来越开始觉得技术变化快给程序员的压力也越来越大。

这篇文章是我的职业生涯的历程&＃xff0c;和一些思考。

2005年的时候&＃xff0c;MFC当时还是非常火的&＃xff0c;当时互联网应用还没有那么兴起&＃xff0c;手机还是老版诺基亚的手机&＃xff0c;所以桌面应用的开发还是有一席之地的。

当时连大学里面的老师都不怎么教Linux下的程序设计&＃xff0c;C&＃43;&＃43;程序设计课统统用的是Virtual C&＃43;&＃43;&＃xff0c;网络实验课也是用Virtual C&＃43;&＃43;做了一个TCP互联进行聊天的程序&＃xff0c;能打开打印机已经是非常牛的事情了。

于是当时本来下决心要把MFC学好&＃xff0c;向往什么时候自己也能做一个Office之类的桌面程序&＃xff0c;于是有一本大部头的书《深入浅出MFC》&＃xff0c;侯杰写的&＃xff0c;这是读的第一本关于源码分析的书&＃xff0c;也立志自己将来也要对一个框架了解到如此的透彻&＃xff0c;也能写本源码分析的书。

MFC做了不到一年&＃xff0c;发现了不爽的方面&＃xff0c;就是无论你对这个框架如何熟&＃xff0c;到了最底层能接触到的也只有微软写的API&＃xff0c;而再往下就只能看MSDN中抽象的解释了&＃xff0c;代码&＃xff1f;嘿嘿&＃xff0c;微软不会给你看的&＃xff0c;就算有源码出来&＃xff0c;也是过时的&＃xff0c;而且没有像Linux一个社区一样很多人去解析&＃xff0c;一大堆代码放在那里&＃xff0c;全无头绪。

而且当时在思考一个终极问题&＃xff0c;也是很多非计算机专业的同学问的&＃xff0c;你看你们学计算机的&＃xff0c;网站做不了&＃xff0c;桌面应用做不了&＃xff0c;你们都学了些啥&＃xff1f;我说我学得是计算机科学&＃xff0c;例如操作系统&＃xff0c;计算机网络&＃xff0c;数据结构&＃xff0c;数据库&＃xff0c;编译原理这些核心课程啊&＃xff0c;又不是做网站和桌面应用的。同学就问了&＃xff0c;那你学这些东西也没啥用啊&＃xff1f;这个问题我当时回答不了&＃xff0c;但是我始终相信&＃xff0c;这么多前辈科学家们总结出来的这些基础学科肯定有用处&＃xff0c;是我的方向没选对&＃xff0c;我不应该仅仅做一个拖拖拽拽就搞定的程序员。

于是我自己开始看APUE《Advanced Programming in the UNIX》&＃xff0c;看《TCP/IP illustrated》&＃xff0c;看《The C&＃43;&＃43; programming languages》&＃xff0c;看《Understanding the linux kernel》等&＃xff0c;我要找一个做Linux的工作&＃xff0c;能用的上大学学得基础学科。这些都是大部头的书啊&＃xff0c;一本比一本厚&＃xff0c;但是这些书是都值得反复读的&＃xff0c;哪怕从现在来看也是的。

很幸运从事MFC不到一年&＃xff0c;就面上了当时还如日中天的诺基亚2006年&＃xff0c;当时实习培训的时候&＃xff0c;诺基亚的市场占有率94%&＃xff0c;给我们培训的讲师说在手机市场&＃xff0c;诺基亚说什么就是什么&＃xff0c;当时没有任何怀疑。当时诺基亚的福利好的出乎意料&＃xff0c;每周都有近郊团建&＃xff0c;每年有两次出国。但是我还是感觉出来了不对的地方&＃xff0c;当时在诺基亚加入的组是做后端开发的&＃xff0c;应该是跑在类似基站里面的一个操作系统&＃xff0c;整个操作系统全部都是诺基亚自己开发的&＃xff0c;连程序设计语言都是诺基亚自己的&＃xff0c;这个操作系统的唯一目标是稳定&＃xff0c;因为一旦基站部署在山上&＃xff0c;是没有人去维护的。不但是操作系统&＃xff0c;就连整个项目管理系统&＃xff0c;Bug系统&＃xff0c;持续集成系统&＃xff0c;自动化测试系统等&＃xff0c;全部是诺基亚自己开发的&＃xff0c;我当时想除非我要在诺基亚干一辈子&＃xff0c;不然在这里待了五年&＃xff0c;就只会这里面的东西了。不行&＃xff0c;我要去一个用通用技术的地方&＃xff0c;这是第一次&＃xff0c;我爱上了开源的系统&＃xff0c;应用开源&＃xff0c;不但厂商不被绑定&＃xff0c;程序员也不被绑定。

很幸运&＃xff0c;由于我看了很多上面列出的书籍&＃xff0c;成功面试上了EMC&＃xff0c;当时EMC刚来中国&＃xff0c;办公室还在上海静安寺&＃xff0c;2016年7月14日&＃xff0c;作为EMC中国研发中心的第一批员工&＃xff0c;我入职了&＃xff0c;并且很幸运的&＃xff0c;我从事的是Linux相关的开发&＃xff0c;并且开发的是一套分布式存储系统&＃xff0c;从应用层到内核&＃xff0c;到计算机网络&＃xff0c;都用上了&＃xff0c;第一次感觉到&＃xff0c;大学学的东西真有用&＃xff0c;而且在大学里还没学好。能和国内和国外的存储界大牛一起学习&＃xff0c;真的很受益&＃xff0c;这里面很多大牛的高瞻远瞩当时根本感觉不到&＃xff0c;例如EMC的一个distinguished engineer&＃xff0c;也就是仅次于fellow的一个大牛Fred Rivera&＃xff0c;给我们说对象存储将来会大放异彩&＃xff0c;当时AWS的S3推出不到三个月&＃xff0c;当然现在大家都知道S3几乎成为大容量存储的一个业界标准。在当时看了AWS应该是主流做电商的&＃xff0c;BAT也没有一个上市的&＃xff0c;外企还风风火火&＃xff0c;后来在五角场Baidu在EMC旁边&＃xff0c;当时在Baidu上市之前&＃xff0c;还有很多跳到EMC的&＃xff0c;真是肠子都悔青了&＃xff0c;但是后来看多了&＃xff0c;也发现财富这个事情听天由命&＃xff0c;因为后来2010年的时候&＃xff0c;碰到了一个当时在阿里就是P9的员工跳出来的&＃xff0c;全是命。

还是接着说技术吧。当时有一个做销售的朋友&＃xff0c;问我愿不愿意做手机端的开发&＃xff0c;因为后来诺基亚有了智能机&＃xff0c;就是上面是密密麻麻全键盘的那种&＃xff0c;里面是塞班系统。销售的朋友说&＃xff0c;他觉得手机移动应用将来是趋势&＃xff0c;我应该率先行动起来&＃xff0c;学移动应用开发。我说好&＃xff0c;我业余研究一下&＃xff0c;可是研究什么呢&＃xff1f;没有别的选择&＃xff0c;只有塞班&＃xff0c;当时以诺基亚的实力&＃xff0c;塞班绝对是标准。其实现在看来我的销售朋友的眼光很不错&＃xff0c;趋势看的也对&＃xff0c;但是如果我真的转了塞班&＃xff0c;对于技术人员来讲&＃xff0c;却是个灾难。做技术的千万不要相信什么精通了一门语言&＃xff0c;所有的语言都精通&＃xff0c;精通了一部分&＃xff0c;其他的都触类旁通这种鬼话&＃xff0c;你做了10年Java&＃xff0c;去面试一个C&＃43;&＃43;的职位你就知道了&＃xff0c;而且越往后越难转。

当时我之所以没有学成塞班&＃xff0c;是因为文档不全&＃xff0c;找不到很好的示例&＃xff0c;这也是为什么我喜欢开源的原因&＃xff0c;官方文档往往新手上手不容易&＃xff0c;而开源社区会有大量的文章和人帮你。而且后来在EMC&＃xff0c;我进入了一个更有意思的项目组&＃xff0c;就是搜索引擎&＃xff0c;当时是2008年&＃xff0c;我们基于的是开源框架Lucene。

搜索引擎太有意思了&＃xff0c;而且当时我们做的是一个能够有事务支持的搜索引擎&＃xff0c;要和一个数据库联动的。在这里面我用到了编译原理&＃xff0c;因为解析一个用户查询需要解析语法树&＃xff0c;能用的JavaCC&＃xff0c;用到了多种数据结构&＃xff0c;Trie树&＃xff0c;B&＃43;树&＃xff0c;倒排表&＃xff0c;跳跃表等&＃xff0c;用到了数据库的write ahead log实现CRUD&＃xff0c;因为自己要关心事务的事情。

而且最最重要的&＃xff0c;这是我接触过的第一个开源软件&＃xff0c;并可以通过阅读开源代码了解背后的机制&＃xff0c;并能够进行定制化。而且这燃起了我想成为另一个侯杰的梦想&＃xff0c;我要写博客&＃xff0c;我要分析源代码&＃xff0c;分析的越透彻越好&＃xff0c;如果能够写一本书就好了。

于是我在CSDN和JavaEye&＃xff0c;现在合并成一家&＃xff0c;后者叫ITEye了&＃xff0c;注册了一个叫做forfuture1978的账号&＃xff0c;名字叫觉先&＃xff0c;应该做Lucene的可能听说过这个名字。我不是78年的&＃xff0c;是82年的&＃xff0c;当时为了显老&＃xff0c;显得权威一些&＃xff0c;所以用了这个名字。之所以叫觉先&＃xff0c;是因为当时看了吴晓波的《激荡三十年》&＃xff0c;有一个叫陈春先的人&＃xff0c;这个人本来是一个和陈景润齐名的科学家&＃xff0c;可是从美国硅谷回来之后&＃xff0c;立志要创办中国的硅谷中关村&＃xff0c;于是自己创业了&＃xff0c;没有在科学家的道路上走下去&＃xff0c;被称为中关村民营科技第一人&＃xff0c;当然作为科学家的他商业头脑不灵&＃xff0c;没有像柳传志一样赚大钱&＃xff0c;却牺牲了自己的前途&＃xff0c;作为IT的从业人员&＃xff0c;看到这里很感动&＃xff0c;于是记错了名字&＃xff0c;记成立陈觉先&＃xff0c;于是1978年是改革开放元年&＃xff0c;于是我起名字博客为觉先。

当时开始对Lucene的源代码进行深入的分析&＃xff0c;后来形成了《Lucene原理与代码分析》http://download.csdn.net/detail/forfuture1978/2452992&＃xff0c;长达500多页&＃xff0c;霸占JavaEye下载第一名好久&＃xff0c;里面恨不得每一行代码都解析过了。当然这本书起到的第二个作用是机械工业出版社和华章培训网邀请出了一个课程&＃xff0c;《Lucene应用开发解密》https://baike.baidu.com/item/Lucene%E5%BA%94%E7%94%A8%E5%BC%80%E5%8F%91%E6%8F%AD%E7%A7%98/10540077?fr&＃61;aladdin

但是做Lucene的代码分析的时候&＃xff0c;当时的一个误区是太关注代码的细节&＃xff0c;每一行都要扣懂了才罢&＃xff0c;然而开源软件更新实在太快了&＃xff0c;技术的迭代太快了&＃xff0c;根本赶不上。所以后来在开源软件分析方面&＃xff0c;总结出来的经验是&＃xff0c;代码是要看&＃xff0c;但是要超脱出来看思想&＃xff0c;或者再深入一层看原理&＃xff0c;而不纠结与代码细节&＃xff0c;思想和原理是相对稳定的&＃xff0c;这一点收益良多。

于是在公众号里面&＃xff0c;有关搜索引擎原理的&＃xff0c;有下面的几篇

不是技术也能看懂搜索引擎

大数据就是众人拾柴火焰高

有关技术本质的又下面的几篇

搜索引擎的设计(1)&＃xff1a;词典的设计

搜索引擎的设计(2)&＃xff1a;倒排表的设计上

搜索引擎的设计(3)&＃xff1a;倒排表的设计下

这里面的数据结构&＃xff0c;压缩算法&＃xff0c;是至今不做搜索引擎都有用的&＃xff0c;例如在前几天AWS的submmit上面听到的在对象存储中应用到的压缩算法&＃xff0c;有了这个基础&＃xff0c;就一听就能听明白。

当Lucene研究的比较深入之后&＃xff0c;在2009年出来加入了一家创业公司&＃xff0c;专门做搜索引擎。当时搜索引擎太热了&＃xff0c;因为Google刚退出中国&＃xff0c;连乒乓球运动员都来做搜索引擎&＃xff0c;于是跟随了两个技术大拿一起创业了&＃xff0c;一个是美国的海归&＃xff0c;放弃了Linkedin的上市机会&＃xff0c;一个是阿里的P9&＃xff0c;放弃了阿里的上市机会。现在那家公司依然还活的非常好&＃xff0c;两个老大都还在。

跟着这两个老大学到的一点&＃xff0c;就是创业的心态和开放的心态。老大说创业的工作就是要学会Drive&＃xff0c;如果觉得某件事情能够促使组织进步&＃xff0c;哪怕不是你的工作范围内的&＃xff0c;你也要驱动自己或者他人去做&＃xff0c;要有开放的心态&＃xff0c;碰到新的技术不要抵触&＃xff0c;有用就拿来用&＃xff0c;不要抱着自己的一亩三分地的技术不放。这点的确有用&＃xff0c;因为技术变的太快的&＃xff0c;你自己抱着&＃xff0c;觉得自己的技术有用&＃xff0c;别人的技术不行&＃xff0c;时过境迁&＃xff0c;三十年河东三十年河西&＃xff0c;有多少抱着自己的技术不教新人的老员工同时自己也不进步&＃xff0c;从而被淘汰。

在这家创业公司&＃xff0c;第一次接触了SOA&＃xff0c;并且接触到了一个从搜狐过来的架构师搭建的一套服务发现的系统&＃xff0c;注册中心用的不是zookeeper&＃xff0c;而是数据库&＃xff0c;但无所谓&＃xff0c;原理都是一样的&＃xff0c;这给我后面接触微服务和Dubbo&＃xff0c;SpringCloud奠定了很好的基础。旁边坐着一个hadoop的大牛&＃xff0c;在这里面学习了map-reduce的原理&＃xff0c;也看了源代码&＃xff0c;虽然后来map-reduce有了2.0&＃xff0c;后来又有了spark&＃xff0c;但是从原理来讲&＃xff0c;分治法处理的思想是不变的&＃xff0c;能够比较容易上手。

http://www.cnblogs.com/popsuper1982/p/5585411.html

http://www.cnblogs.com/popsuper1982/p/5585420.html

http://www.cnblogs.com/popsuper1982/p/5585424.html

http://www.cnblogs.com/popsuper1982/p/5585427.html

这是四篇hadoop的原理与代码分析的文章&＃xff0c;没有分析的很细&＃xff0c;而且是map-reduce 1.0版本的&＃xff0c;所以没有放到公众号里面。

到了这个时间&＃xff0c;年级大了&＃xff0c;于是重新使用了popsuper1982这个博客。

另外在这家创业公司&＃xff0c;还接触到了一些对于财经领域的分类和聚类的算法&＃xff0c;以及NLP的算法&＃xff0c;当时还没有深度学习&＃xff0c;主流的方式还是基于概率的。也是这一段经历&＃xff0c;使得现在接触深度学习的时候&＃xff0c;有了一定的基础&＃xff0c;不是完全从头开始。

通过这家创业公司&＃xff0c;我也发现&＃xff0c;对于一个技术人员来讲&＃xff0c;大公司是做深入的好机会&＃xff0c;而创业公司是做广的好机会&＃xff0c;技术人员眼光还是要开放&＃xff0c;因为可能接触到的一些点&＃xff0c;以后会有大的用处。

当然接触Flash Air的开发也是在这家创业公司&＃xff0c;当时Flash Air如日中天&＃xff0c;所以我们的财经分析软件就是用Air开发的&＃xff0c;很酷。但是这个技术我不喜欢&＃xff0c;是因为被一家公司主导&＃xff0c;不开源&＃xff0c;当时也没想到Flash会被Adobe放弃掉。

后来来到了HP做云计算&＃xff0c;当时还没有什么OpenStack啥的&＃xff0c;Vmware是私有云老大&＃xff0c;AWS当时已经是公有云老大&＃xff0c;最初是去HP做云管平台的。为什么能够面试上HP呢&＃xff0c;是因为云管平台要管理hadoop的平台&＃xff0c;这是结合点&＃xff0c;那为什么我要来HP呢&＃xff1f;是因为这是一个Solution Archtect的职位&＃xff0c;能够接触客户&＃xff0c;因为上一家创业公司的两个老大都是技术出身&＃xff0c;思维都太技术了&＃xff0c;我当时太想知道用户想什么了。

但是我又不想做一个完全念PPT的工作&＃xff0c;于是还是参与了一些运维和实施的工作&＃xff0c;好在HP比较开放&＃xff0c;没有太严格的界限。

在学云计算的时候&＃xff0c;我继续秉承了了解思想的方法&＃xff0c;通过了解Vmware和AWS&＃xff0c;了解作为云计算&＃xff0c;从设计角度应该有哪些功能。然而想深入了解原理&＃xff0c;很可惜Vmware和AWS是黑盒的&＃xff0c;光看文档不解渴&＃xff0c;好在后来有了OpenStack&＃xff0c;HP有了Helion。

OpenStack什么都在学AWS&＃xff0c;所以我开始看OpenStack的代码&＃xff0c;但是着重关注其中的原理部分&＃xff0c;而不必过分在意OpenStack的代码的细节。于是就有了《OpenStack创建虚拟机的50个步骤和100个知识点》。

OpenStack虚拟机创建的50个步骤和100个知识点

50个步骤&＃xff0c;可能随着后来代码的改变&＃xff0c;早就不是这50个步骤了&＃xff0c;但是100个知识点&＃xff0c;从认证&＃xff0c;鉴权&＃xff0c;调度&＃xff0c;高可用&＃xff0c;虚拟化&＃xff0c;网络&＃xff0c;存储等都是不变的。

我可以不跟进OpenStack的代码变化&＃xff0c;但是我要了解KVM的细节&＃xff0c;这就是为什么公众号有一大批是关于KVM的。

我是虚拟机内核我困惑&＃xff1f;&＃xff01;

Qemu&＃xff0c;KVM&＃xff0c;Virsh傻傻的分不清

裸用KVM创建虚拟机&＃xff0c;体验virtualbox为你做的10件事情

用OpenStack界面轻松创建虚拟机的你&＃xff0c;看得懂虚拟机启动的这24个参数么&＃xff1f;

手动用KVM模拟OpenStack Cinder挂载iSCSI卷

KVM半虚拟化设备virtio及性能调优最佳实践

我的虚拟机挂了&＃xff01;怎么把镜像里面的数据找回来&＃xff1f;

我也要了解网络的细节&＃xff0c;于是公众号有一大批是关于OpenVswitch的。

觉得OpenStack的网络复杂&＃xff1f;其实你家里就有同样一个网络

当发现你的OpenStack虚拟机网络有问题&＃xff0c;不妨先试一下这16个步骤

Openvswitch总体架构与代码结构

跟随Openvswitch数据库&＃xff0c;才能玩遍OVS

玩转Openvwitch第一站&＃xff1a;Manager和SSL

玩转Openvswitch第十站&＃xff1a;Flow Table

玩转Openvswitch之综合篇

从Openvswitch代码看网络包的旅程

接下来其他部分也会逐渐写进去。

看懂了OpenStack&＃xff0c;再回来看AWS&＃xff0c;则理解的更加深入了&＃xff0c;有点像穿着透明的衣服&＃xff0c;你大概知道AWS的这个界面操作后台是怎么弄的。

但是HP的Helion OpenStack在国内水土不服&＃xff0c;于是后来就到了华为&＃xff0c;从事FusionSphere OpenStack相关的工作&＃xff0c;也接触了不少的客户&＃xff0c;不但了解了云计算技术&＃xff0c;对于云计算的产业&＃xff0c;竞争对手的情况&＃xff0c;各个厂家的优劣势的比较&＃xff0c;也做到心中有数&＃xff0c;有了一定的大局观。

看懂了OpenStack&＃xff0c;后来就有了Docker&＃xff0c;并且加入了一家做容器的创业公司。OpenStack还没火完&＃xff0c;Docker又来了&＃xff0c;技术更新也太快了&＃xff0c;但是当你掌握了原理&＃xff0c;就发现其实没变什么&＃xff0c;认证和鉴权&＃xff0c;AWS是这样做的&＃xff0c;OpenStack是这样做到&＃xff0c;Mesos是这样做到&＃xff0c;Kubernetes也是这样做的&＃xff0c;Namespace和cgroup&＃xff0c;会Linux的都应该会的&＃xff0c;会了网络的基本原理&＃xff0c;什么Docker Overlay&＃xff0c;Weave&＃xff0c;Flannel&＃xff0c;Calico等等不一而足&＃xff0c;但是往细里看&＃xff0c;还是那些基本原理。

当然有好的风景也不能错过&＃xff0c;心态要开放嘛&＃xff0c;比如Mesos的两层调度&＃xff0c;原来没有接触过&＃xff0c;就需要仔细研究一下。

号称了解mesos双层调度的你&＃xff0c;先来回答下面这五个问题&＃xff01;

在容器创业公司&＃xff0c;又是我一个广度拓展的过程&＃xff0c;Swarm&＃xff0c;Mesos&＃xff0c;Kubernetes都用上了&＃xff0c;还接触到了NFV&＃xff0c;4G网络的架构&＃xff0c;E-NodeB&＃xff0c;MME&＃xff0c;SGW&＃xff0c;PGW&＃xff0c;HSS&＃xff0c;PCRF等&＃xff0c;以及管理面的Diameter协议&＃xff0c;数据面的GTP协议&＃xff0c;有空可以写写这部分&＃xff0c;不知道以后这部分知识是否能够用到。还接触到了SMACK&＃xff0c;Spark Mesos AKKA Cassandra Kafka。而且部署的应用是springboot &＃43; dubbo的&＃xff0c;在SOA方面又进一步。

后来来到了网易云&＃xff0c;从事解决方案总架构师的职位。在网易&＃xff0c;kubernetes需要更加深入的研究一下&＃xff0c;因为难得能够碰到有如此大规模的kubernetes集群&＃xff0c;微服务也需要深入研究一下&＃xff0c;因为难得能够见证考拉和云音乐如此迅猛的增长。另外还会继续保持开放的心态&＃xff0c;对大数据和人工智能部分做一些了解&＃xff0c;能够如此早的将人工智能用于类似客服和业务安全的厂商也不多&＃xff0c;大部分还处于预研究的状态。

接下来说说我的感悟吧&＃xff1a;

• 心态要开放&＃xff0c;做程序员&＃xff0c;就做老罗说的终身学习者吧&＃xff0c;别抱着一个技术不放&＃xff0c;害怕别人学会&＃xff0c;因为很快会过时&＃xff0c;别对新产生的技术抱敌对的态度&＃xff0c;这没有任何用处。

• 学习什么呢&＃xff1f;要学那些开源的&＃xff0c;至少开放的技术&＃xff0c;而且越主流&＃xff0c;热度越高越好&＃xff0c;不要相信单个企业的强大&＃xff0c;另一个罗胖也说过&＃xff0c;现在牛的冒烟的企业&＃xff0c;估计30多年&＃xff0c;也就差不多了。要相信生态的力量&＃xff0c;蚂蚁见证了恐龙的诞生&＃xff0c;也见证了恐龙的灭亡&＃xff0c;见证了人类的诞生&＃xff0c;估计也会见证人类的灭亡。那些已经被广泛使用的开源软件就像蚂蚁。

• 学习开源软件不要纠结于代码层面&＃xff0c;而是向下深入挖掘本质的原理&＃xff0c;这些原理正是大学里学的这些课程&＃xff0c;是科学家们智慧的结晶&＃xff0c;就像分子一样&＃xff0c;就算有一天蚂蚁灭绝了&＃xff0c;也不过是分子的重新组合。

• 学习开源软件还可以向上抽象出思想&＃xff0c;这些思想都是可以用于产品设计和架构设计的。

• 懂一些市场&＃xff0c;懂一些客户&＃xff0c;从市场和客户那里是能够发现技术的发展方向。