簡 歷 本人概況 姓名：陳海軍 性別：男 民族：漢 出生年月：1977年8月 工作經(jīng)歷：1999年7月-2013年3月 263網(wǎng)絡(luò)集團(tuán), 雅虎中國, 卓望信息,博泰, 無線立通 地址：北京 最近職務(wù)：資深架構(gòu)師(總監(jiān))。 特點(diǎn)：做事認(rèn)真負(fù)責(zé)、嚴(yán)謹(jǐn)細(xì)致，愛鉆研核心技術(shù)，關(guān)注技術(shù)趨勢 專長：Hadoop云存儲(chǔ)技術(shù)/Lucene搜索引擎技術(shù)等, 主要使用C/C++/Java語言 聯(lián)系電話： 郵件地址/MSN：navychen2003@hotmail.com 博客：http://javenstudio.org/ 工作經(jīng)歷 創(chuàng)業(yè) 2013年3月 - 現(xiàn)在， 創(chuàng)業(yè) 開發(fā)基礎(chǔ)平臺(tái)產(chǎn)品: 個(gè)人云存儲(chǔ)系統(tǒng)和我的資料庫管理系統(tǒng) 公司: 無線立通 2011年5月 - 2013年3月， 資深架構(gòu)師(總監(jiān)) 負(fù)責(zé)公司架構(gòu)師團(tuán)隊(duì), 并對各個(gè)系統(tǒng)設(shè)計(jì)進(jìn)行評(píng)審, 設(shè)計(jì)和研發(fā)各應(yīng)用系統(tǒng)需要的基礎(chǔ)框架 負(fù)責(zé)項(xiàng)目有: 大眾郵聊產(chǎn)品前端后端系統(tǒng)設(shè)計(jì), 大眾PushEmail產(chǎn)品前端后端基礎(chǔ)框架設(shè)計(jì), 企業(yè)郵件系統(tǒng)存儲(chǔ)和搜索系統(tǒng)設(shè)計(jì)等, 短信網(wǎng)關(guān)基礎(chǔ)框架設(shè)計(jì)等 公司: Pateo博泰 20010年12月 - 2011年5月， 技術(shù)架構(gòu) 公司: 卓望信息 2009年7月 - 2010年11月，移動(dòng)搜索系統(tǒng)架構(gòu)設(shè)計(jì)和開發(fā) 2010/3-2010/9：移動(dòng)搜索平臺(tái)系統(tǒng)項(xiàng)目 角色：移動(dòng)搜索平臺(tái)系統(tǒng)架構(gòu)設(shè)計(jì)/開發(fā) 人員：約1-3位工程師 系統(tǒng)平臺(tái)：Linux pc server 開發(fā)語言和相關(guān)技術(shù)：Java 2010年3月至2010年9月，設(shè)計(jì)和開發(fā)移動(dòng)搜索平臺(tái)系統(tǒng)（改造Hawk搜索系統(tǒng)，基本完整實(shí)現(xiàn)Google提供的移動(dòng)搜索服務(wù)），包括新聞搜索、SP元數(shù)據(jù)搜索、其它信息搜索，以及后臺(tái)索引提交服務(wù)系統(tǒng)，SP元數(shù)據(jù)校驗(yàn)服務(wù)，動(dòng)態(tài)摘要等。 2009/7-2010/1：Hawk集群搜索平臺(tái)系統(tǒng)項(xiàng)目 角色：Hawk搜索平臺(tái)系統(tǒng)架構(gòu)設(shè)計(jì)/開發(fā) 人員：約1-2位工程師 系統(tǒng)平臺(tái)：Linux pc server 開發(fā)語言和相關(guān)技術(shù)：Java 2009年7月至2010年1月，設(shè)計(jì)和開發(fā)Hawk集群搜索平臺(tái)系統(tǒng)以支持夢話項(xiàng)目，功能特點(diǎn)包括1,集群式搜索服務(wù)器管理和調(diào)度系統(tǒng)，根據(jù)角色定義各個(gè)搜索服務(wù)器啟動(dòng)的后臺(tái)服務(wù)，以實(shí)現(xiàn)分布式搜索系統(tǒng)；2，可根據(jù)應(yīng)用需求配置定義索引結(jié)構(gòu)及文檔結(jié)構(gòu)，實(shí)現(xiàn)垂直搜索應(yīng)用；3，分布式數(shù)據(jù)索引和存儲(chǔ)以及檢索系統(tǒng)，實(shí)現(xiàn)查詢服務(wù)器群，搜索服務(wù)器群，索引服務(wù)器群分離并分別獨(dú)立擴(kuò)展，實(shí)現(xiàn)數(shù)據(jù)分布索引和存儲(chǔ)，理論可以支持上億數(shù)據(jù)規(guī)模的索引和檢索應(yīng)用；4，根據(jù)應(yīng)用配置索引數(shù)據(jù)和調(diào)度策略，可以實(shí)現(xiàn)不同時(shí)段數(shù)據(jù)按不同規(guī)則進(jìn)行索引處理及數(shù)據(jù)同步等。 公司: 無線立通 2008年10月 - 2009年6月， 企業(yè)郵局系統(tǒng)架構(gòu)及平臺(tái)系統(tǒng)設(shè)計(jì)和開發(fā) 2008/10-2009/6： 企業(yè)郵局系統(tǒng)和平臺(tái)系統(tǒng)項(xiàng)目 角色：郵局系統(tǒng)架構(gòu)設(shè)計(jì)/開發(fā) 人員：約4位工程師 系統(tǒng)平臺(tái)：Linux pc server 開發(fā)語言和相關(guān)技術(shù)：C/C++, C# 2008年10月至2009年6月，參與PushEmail平臺(tái)系統(tǒng)設(shè)計(jì)和開發(fā)(C#語言)，后負(fù)責(zé)企業(yè)郵局系統(tǒng)架構(gòu)設(shè)計(jì)。 合作項(xiàng)目 2008年1月 - 2009年1月， 開發(fā)hawk搜索平臺(tái)及合作項(xiàng)目 公司: 雅虎中國 2005年12月 - 2008年1月， 任網(wǎng)頁搜索相關(guān)性部搜索引擎研究小組組長 2007/9-2007/12： 知識(shí)問答搜索項(xiàng)目 角色：項(xiàng)目經(jīng)理/規(guī)劃/技術(shù)設(shè)計(jì)/開發(fā) 人員：4位工程師 系統(tǒng)平臺(tái)：FreeBSD pc server 開發(fā)語言和相關(guān)技術(shù)：Java, Lucene, Hadoop 2007年9月至12月，帶領(lǐng)5位同事負(fù)責(zé)研發(fā)知識(shí)搜索平臺(tái)，吸取了Lucene/Hadoop/Nutch開源項(xiàng)目的優(yōu)點(diǎn)，設(shè)計(jì)并開發(fā)一套已擴(kuò)展的搜索平臺(tái)，并在它基礎(chǔ)上設(shè)計(jì)并開發(fā)智能型搜索項(xiàng)目知識(shí)搜索，此搜索平臺(tái)也同時(shí)應(yīng)用于多個(gè)中小型垂直搜索產(chǎn)品中。在此項(xiàng)目中同時(shí)運(yùn)用了一些極限編程思想來管理項(xiàng)目過程。 2007/5-2007/6： 網(wǎng)絡(luò)字典1.0優(yōu)化項(xiàng)目 角色：技術(shù)設(shè)計(jì)/開發(fā) 人員：3位工程師 系統(tǒng)平臺(tái)：FreeBSD pc server 開發(fā)語言和相關(guān)技術(shù)：Vespa, C/C++, Perl, Java 參與網(wǎng)絡(luò)字典項(xiàng)目組改進(jìn)其索引和檢索性能和相關(guān)性等。 2006/10-2007/1： Hadoop小組及應(yīng)用項(xiàng)目 角色：小組組長/規(guī)劃/應(yīng)用項(xiàng)目設(shè)計(jì)開發(fā) 人員：6位工程師 均part-time 系統(tǒng)平臺(tái)：Redhat Linux, 5 pc server 開發(fā)語言和相關(guān)技術(shù)：Java, Hadoop 2006年8月2008年1月，任引擎研究小組組長，并負(fù)責(zé)與US同事合作并加入開源的hadoop項(xiàng)目，承擔(dān)部分任務(wù)，同時(shí)負(fù)責(zé)公司hadoop cluster的建設(shè)及其應(yīng)用的推廣支持等。后期負(fù)責(zé)公司Vespa搜索引擎的源碼研究以及多重索引改造工作，編寫了其完整的索引結(jié)構(gòu)和檢索技術(shù)文檔。 這段時(shí)間在負(fù)責(zé)本部門team的工作同時(shí)，開始任領(lǐng)導(dǎo)要求成立并負(fù)責(zé)hadoop小組虛擬團(tuán)隊(duì)，與6位不同部門同事與US團(tuán)隊(duì)合作參與hadoop項(xiàng)目研發(fā)。在前期工作進(jìn)行比較順利，并成功建立了2個(gè)測試用cluster并完成幾個(gè)應(yīng)用項(xiàng)目。后期由于需要投入更多硬件資源和公司的戰(zhàn)略變化等原因不得不擱置最后暫停了本項(xiàng)目。本人希望能通過此項(xiàng)目深入理解分布式計(jì)算，并有實(shí)際應(yīng)用。 2007/2-2007/5： Vespa搜索引擎多重索引研究項(xiàng)目 角色：項(xiàng)目經(jīng)理/規(guī)劃/設(shè)計(jì)開發(fā) 人員：2位工程師 + 2位工程師part-time 系統(tǒng)平臺(tái)：FreeBSD pc server 開發(fā)語言和相關(guān)技術(shù)：C/C++, Vespa , Word segmentation and YWS 另外一個(gè)項(xiàng)目就是負(fù)責(zé)一個(gè)4人小組研究公司vespa搜索引擎源碼，并且進(jìn)行多重索引改造和測試等研究，同時(shí)完成部分引擎技術(shù)文檔和培訓(xùn)。不僅對vespa的架構(gòu)有了更充分認(rèn)識(shí)，對其索引結(jié)構(gòu)和檢索算法也有了更深入理解。此項(xiàng)目的同時(shí)本人還在研究lucene源碼，并想完成一個(gè)系列文章貼在自己blog上，與同道中人交流，還在進(jìn)行中，本人希望能盡快更深入地理解搜索引擎技術(shù)以及在學(xué)習(xí)智能檢索，人工智能等方向有所成效。 2006/6-2006/12： 網(wǎng)頁搜索拼寫糾錯(cuò)2.0項(xiàng)目 角色：項(xiàng)目經(jīng)理/總體設(shè)計(jì)/基礎(chǔ)代碼設(shè)計(jì)開發(fā) 人員：3位工程師 系統(tǒng)平臺(tái)：FreeBSD pc server 開發(fā)語言和相關(guān)技術(shù)：C++, Php/extension, perl, Java, Hadoop 2006年3月至12月，帶領(lǐng)6位新同事負(fù)責(zé)相關(guān)搜索和拼寫糾錯(cuò)等產(chǎn)品，大部分是剛畢業(yè)學(xué)生，對自己有一定挑戰(zhàn)，做了多種工作方式調(diào)整并如期成功發(fā)布了新版相關(guān)搜索和全新開發(fā)的拼寫糾錯(cuò)產(chǎn)品，質(zhì)量和穩(wěn)定性都達(dá)到了國內(nèi)領(lǐng)先水平。 這段時(shí)間的主要工作除了培養(yǎng)新人，具體的項(xiàng)目一個(gè)就是開發(fā)相關(guān)搜索3.0和4.0，重點(diǎn)解決成人詞識(shí)別等問題，并加入了詞性識(shí)別，同時(shí)完善了詞典管理工具等，使得相關(guān)搜索更加成熟。拼寫糾錯(cuò)是另一個(gè)全新開發(fā)的系統(tǒng)，包括拼寫糾錯(cuò)和拼音推薦兩個(gè)模塊，此新版本在US同事設(shè)計(jì)的算法基礎(chǔ)下進(jìn)行全新設(shè)計(jì)和開發(fā)，本人劃分了幾個(gè)獨(dú)立模塊：詞典管理和搜索基礎(chǔ)框架模塊，拼寫糾錯(cuò)模塊，拼音推薦模塊，管理系統(tǒng)模塊等與二位同事協(xié)同開發(fā)，并第一次使用hadoop系統(tǒng)挖掘網(wǎng)絡(luò)日志計(jì)算出同現(xiàn)頻率等詞庫，同時(shí)開發(fā)出高效的詞庫批量review工具和批量測試工具，使得項(xiàng)目在預(yù)計(jì)時(shí)間內(nèi)按質(zhì)按要求成功完成并一次上線成功，一直穩(wěn)定運(yùn)行至今。 2005/12-2006/12： 網(wǎng)頁搜索相關(guān)搜索2.0項(xiàng)目 角色：項(xiàng)目經(jīng)理/總體設(shè)計(jì)/代碼設(shè)計(jì)開發(fā) 人員：4位工程師+1位工程（臺(tái)灣）+1位架構(gòu)師（美國） 系統(tǒng)平臺(tái)：FreeBSD pc server 開發(fā)語言和相關(guān)技術(shù)：C++, Php/extension, perl, Vespa Search Engine 2005年12月，接手相關(guān)搜索項(xiàng)目，并任項(xiàng)目經(jīng)理負(fù)責(zé)全新架構(gòu)的相關(guān)搜索的設(shè)計(jì)和開發(fā)，與國內(nèi)外三地工程師聯(lián)合開發(fā)，項(xiàng)目如期上線并達(dá)到了國內(nèi)同類產(chǎn)品前列，并創(chuàng)新加入多種技術(shù)如query分析，Re-rank等。 本人接手第一個(gè)項(xiàng)目是相關(guān)搜索1.0，由于在一些詞的相關(guān)性方面與國內(nèi)大搜索引擎公司還有較大差距，所以2.0重點(diǎn)解決相關(guān)性問題。本人首先熟悉目前系統(tǒng)的架構(gòu)和檢索算法，并考察競爭對手的特點(diǎn)，得出幾條主要的不足之處，最重要的是中心詞識(shí)別問題，1.0版本在這方面改進(jìn)較少，所以重點(diǎn)分析加入了中心詞識(shí)別技術(shù)，大大提高了相關(guān)性。另一個(gè)重點(diǎn)問題是數(shù)據(jù)量加大后的檢索效率問題，新版本引入了更先進(jìn)的vespa搜索引擎平臺(tái)，使得2.0在各方面都有了很大提高，并成為網(wǎng)頁搜索內(nèi)部最重要的PV來源之一。 公司: 263網(wǎng)絡(luò)通信集團(tuán) 2004年4月 - 2005年10月， 任郵件技術(shù)平臺(tái)部經(jīng)理并負(fù)責(zé)郵件技術(shù)架構(gòu) 2005/01-2005/05： 263郵件服務(wù)平臺(tái)和C++基礎(chǔ)庫 角色：經(jīng)理/技術(shù)架構(gòu)/基礎(chǔ)庫代碼設(shè)計(jì)開發(fā) 人員：6位工程師 系統(tǒng)平臺(tái)：Solaris Sparc64 和 Redhat Linux pc server 開發(fā)語言和相關(guān)技術(shù)：C++, TCP/IP, SMTP, POP3 帶領(lǐng)近10個(gè)人的開發(fā)團(tuán)隊(duì)負(fù)責(zé)263郵件系統(tǒng)的平臺(tái)模塊系統(tǒng)的設(shè)計(jì)開發(fā)和維護(hù)，主要包括存儲(chǔ)、認(rèn)證、投遞、 MTA轉(zhuǎn)發(fā)及POP3這樣的系統(tǒng)等。負(fù)責(zé)郵件系統(tǒng)的技術(shù)架構(gòu)的設(shè)計(jì)和規(guī)劃，并曾制定公司 開發(fā)規(guī)范草稿。在工作中應(yīng)用UML和敏捷過程的理念，實(shí)現(xiàn)較大系統(tǒng)的協(xié)同開發(fā)。 設(shè)計(jì)并開發(fā)了一套通用的C++框架，包含了基礎(chǔ)的容器庫、類似Log4j的日志庫、IO流及網(wǎng)絡(luò)庫和類似JavaMail的郵件解析庫， 還設(shè)計(jì)了通用的服務(wù)器框架庫等，參考Java和.Net的接口設(shè)計(jì)，大約20萬行代碼。 帶領(lǐng)本部門同事使用面向?qū)ο笏枷腴_發(fā)系統(tǒng)，實(shí)現(xiàn)了模塊化的設(shè)計(jì)，測試也通過自己開發(fā)的一個(gè)工具實(shí)現(xiàn) 了自動(dòng)化測試。為公司培養(yǎng)了一些人才。 2002年12月 - 2004年3月， 負(fù)責(zé)郵件核心模塊存儲(chǔ)系統(tǒng)及基礎(chǔ)庫的開發(fā)維護(hù) 2002/12-2004/02： 263郵件存儲(chǔ)系統(tǒng)和基礎(chǔ)庫 角色：技術(shù)架構(gòu)/設(shè)計(jì)開發(fā)/基礎(chǔ)庫代碼設(shè)計(jì)開發(fā) 人員：1位工程師 系統(tǒng)平臺(tái)：Solaris Sparc64 和 Redhat Linux pc server 開發(fā)語言和相關(guān)技術(shù)：C/C++, TCP/IP, pthread/IPC/shm, Mime/RFC 負(fù)責(zé)郵件存儲(chǔ)系統(tǒng)及郵件LIB庫等，對郵件的存儲(chǔ)系統(tǒng)做過多次較大改造，如大規(guī)模遷移用戶數(shù)據(jù)、解決重大故障等， 上線全部成功，用戶投訴很少。此期間學(xué)習(xí)了Unix/Linux下的C系統(tǒng)開發(fā)，如進(jìn)程線程、網(wǎng)絡(luò)通信等，以及Win32系統(tǒng)， COM對象模型技術(shù)，操作系統(tǒng)原理等。 1999年8月 - 2002年12月， 任項(xiàng)目經(jīng)理負(fù)責(zé)開發(fā)郵件計(jì)費(fèi)系統(tǒng)及商城系統(tǒng)等 2001/10-2002/12： 263郵件計(jì)費(fèi)系統(tǒng) 角色：項(xiàng)目經(jīng)理/技術(shù)架構(gòu)/基礎(chǔ)代碼設(shè)計(jì)開發(fā) 人員：4位工程師 系統(tǒng)平臺(tái)：Redhat Linux pc server 開發(fā)語言和相關(guān)技術(shù)：C/C++, Java, oracle 在2002年，帶領(lǐng)三位同事負(fù)責(zé)開發(fā)263郵件計(jì)費(fèi)系統(tǒng)，使用Java語言，并設(shè)計(jì)了一套類似struct的MVC框架， 這次成功的Java應(yīng)用為許多項(xiàng)目打下了基礎(chǔ)。 2000/08-2001/10： 263商城系統(tǒng)ASP版 角色：項(xiàng)目經(jīng)理/技術(shù)架構(gòu)/基礎(chǔ)代碼設(shè)計(jì)開發(fā) 人員：4位工程師 系統(tǒng)平臺(tái)：Windows 2000 pc server 開發(fā)語言和相關(guān)技術(shù)：asp, C/C++, COM, sql server, Delphi 在2001年，帶領(lǐng)三位同事并負(fù)責(zé)開發(fā)一套網(wǎng)上購物系統(tǒng)，使用成熟的ASP語言和SQL Server數(shù)據(jù)庫進(jìn)行開發(fā)， 并使用Delphi設(shè)計(jì)了購物車COM組件。這套系統(tǒng)即263商城一直使用至今， 基本實(shí)現(xiàn)了免維護(hù)。 2000/02-2001/8： 263商城系統(tǒng)Java版 角色：負(fù)責(zé)后臺(tái)管理系統(tǒng)設(shè)計(jì)/代碼設(shè)計(jì)開發(fā) 人員：6位工程師 系統(tǒng)平臺(tái)：Redhat Linux, pc server 開發(fā)語言和相關(guān)技術(shù)：Java, NAS(iPlanet Application Server), Informix 開發(fā)Java版網(wǎng)上購物系統(tǒng)，使用NAS應(yīng)用服務(wù)和Informix數(shù)據(jù)庫進(jìn)行開發(fā)，負(fù)責(zé)后臺(tái)管理系統(tǒng)的設(shè)計(jì)和開發(fā)，后因NAS穩(wěn)定性問題中止項(xiàng)目。