畢業于大連理工大學,本科,有多年大數據分析類大型項目的架構實施經驗,目前任職TD,先后服務于北京大學軟件研究所、高德軟件、阿里巴巴和Teradata,實施過基于Hadoop平臺PageRank算法的實現、高德大數據中心的建設(300+的Hadoop集群開發、優化、運維和提供服務)、阿里巴巴OPDS大數據平臺維護、內蒙移動大數據平臺試點(Hadoop)、臺灣遠傳Hadoop平臺開發和優化、蘭州銀行大數據平臺的架構和開發(Hadoop)、招商銀行的大數據咨詢規劃和設施。在大數據架構、數據集成、數據挖掘/機器學習、實時推薦和營銷方面有豐富經驗,了解大數據在互聯網的使用場景。
1)編寫并出版《Hadoop應用開發技術詳解》圖書,銷售10000+冊——機械工業出版社(2014-01)
3)在infoQ和CSDN等技術論壇都有采訪和發表過文章
1)能熟練的運用Linux系統開發和shell編程,
3)熟悉struts、spring、hibernate開發
4)熟練運用mysql、oracle等關系型數據庫,Cassendra、mongoDB、Redis等NoSql數據庫
8)熟練運用ganglia和Nagios、openTSDB對hadoop集群進行監控
9)熟練運用storm、spark 分布式計算模型,spark Streaming、Mllib和graphx
10)精通MR的編程、Mahout、hbase、Oozie、Kafka、Impala、Tez、hive等應用
12)熟悉openstack和docker虛擬化技術
認證:
國考-軟件設計師(中級)-2009年
近期案例:
蘭州銀行,大數據平臺,架構師,2014年
內蒙移動,大數據平臺試點(Hadoop),架構師,2014年
遠傳電信(臺灣),Hadoop平臺優化解決方案和實施,架構師,2014年
招商銀行大數據咨詢項目規劃和設施,架構師 2015年
交通銀行大數據平臺規劃和設施,架構師 2015年
高德軟件,高德集團大數據中心的建設、從15個Hadoop節點經過5次的擴容到300+節點,機房換了兩個,負責Hadoop平臺的開發、優化、運維和給兄弟部門提供服務等,Hadoop部門經理,2011.03 -2013.01年
阿里巴巴大數據高級架構師,負責OPDS平臺架構、開發和運維 2013-2014.04年