隨著互聯網大數據的時代的到來，越來越多的人看到大數據工程師的好處。所以很多人都紛紛轉行做大數據開發工程師。但是對于一些新手小白來說，在初次接觸大數據開發時，他們有太多的問題需要了解了。就好比，初級大數據開發工程師需要學什么？初級大數據開發工程師需要具備哪些技能？如果了解下文這些知識，將成為專業的大數據開發工程師。2W的月薪就是小毛毛雨。

　　初級大數據開發工程師需要學什么？

學習大數據的兩大基礎就是JAVA和Linux，學習順序不分前后。需要同時掌握，才可以繼續大數據課程的學習。

· Java：大家都知道Java的方向有JavaSE、JavaEE、JavaME，學習大數據要學習那個方向呢？

只需要學習Java的標準版JavaSE就可以了，像Servlet、JSP、Tomcat、Struts、Spring、Hibernate，Mybatis都是JavaEE方向的技術在大數據技術里用到的并不多，只需要了解就可以了，當然Java怎么連接數據庫還是要知道的，像JDBC一定要掌握一下，有同學說Hibernate或Mybites也能連接數據庫啊，為什么不學習一下，我這里不是說學這些不好，而是說學這些可能會用你很多時間，到最后工作中也不常用，我還沒看到誰做大數據處理用到這兩個東西的，當然你的精力很充足的話，可以學學Hibernate或Mybites的原理，不要只學API，這樣可以增加你對Java操作數據庫的理解，因為這兩個技術的核心就是Java的反射加上JDBC的各種使用。

　　· Linux：因為大數據相關軟件都是在Linux上運行的，所以Linux要學習的扎實一些，學好Linux對你快速掌握大數據相關技術會有很大的幫助，能讓你更好的理解hadoop、hive、hbase、spark等大數據軟件的運行環境和網絡環境配置，能少踩很多坑，學會shell就能看懂腳本這樣能更容易理解和配置大數據集群。還能讓你對以后新出的大數據技術學習起來更快。

　　大數據開發工程師需具備哪些技能？

　　Java

大家都知道Java的方向有JavaSE、JavaEE、JavaME，學習大數據要學習那個方向呢?只需要學習Java的標準版JavaSE就可以了，像Servlet、JSP、Tomcat、Struts、Spring、Hibernate，Mybatis都是JavaEE方向的技術在大數據技術里用到的并不多，只需要了解就可以了，當然Java怎么連接數據庫還是要知道的，像JDBC一定要掌握一下。

　　Linux

因為大數據相關軟件都是在Linux上運行的，所以Linux要學習的扎實一些，學好Linux對你快速掌握大數據相關技術會有很大的幫助，能讓你更好的理解hadoop、hive、hbase、spark等大數據軟件的運行環境和網絡環境配置，能少踩很多坑，學會shell就能看懂腳本這樣能更容易理解和配置大數據集群。

　　Hadoop

這是現在流行的大數據處理平臺幾乎已經成為大數據的代名詞，所以這個是必學的。

　　Mysql

我們學習完大數據的處理了，接下來學習學習小數據的處理工具mysql數據庫，因為一會裝hive的時候要用到，mysql需要掌握到什么層度那？你能在Linux上把它安裝好，運行起來，會配置簡單的權限，修改root的密碼，創建數據庫。這里主要的是學習SQL的語法，因為hive的語法和這個非常相似。

　　Sqoop

這個是用于把Mysql里的數據導入到Hadoop里的。當然你也可以不用這個，直接把Mysql數據表導出成文件再放到HDFS上也是一樣的，當然生產環境中使用要注意Mysql的壓力。

　　Hive

這個東西對于會SQL語法的來說就是神器，它能讓你處理大數據變的很簡單，不會再費勁的編寫MapReduce程序。有的人說Pig那它和Pig差不多掌握一個就可以了。

以上就是關于初級大數據開發工程師需要學什么，以及初級大數據開發工程師需要具備哪些技能的相關內容介紹。其實大數據開發工程師還有很多技能需要學習，例如Spark、Kafka、Hbase、Oozie、Zookeeper等等，這里就不詳解列舉。想了解更多關于大數據開發工程師的信息，請繼續關注中培偉業。