回覆列表
-
1 # 加米穀大資料
-
2 # 千鋒頭號粉絲
想要學習大資料開發,第一件事並不是要找書籍或者是找影片教程,而是要了解一下大資料行業前景,瞭解一下成為大資料工程師需要具備什麼樣的能力,掌握哪些技能我當初學習大資料之前也有過這樣的問題,作為一個過來人,今天就跟大家聊下大資料人才應該具備的技能。
首先我們要知道對於大資料開發工程師需要具備的技能,下面我們分別來說明:
用人單位對於大資料開發人才的能力要求有
技能要求:
1.精通JAVA開發語言,同時熟悉Python、Scala開發語言者優先;
2.熟悉Spark或Hadoop生態圈技術,具有原始碼閱讀及二次開發工作經驗;精通Hadoop生態及高效能快取相關的各種工具,有原始碼開發實戰經驗者優先;
3.熟練使用SQL,熟悉資料庫原理,熟悉至少一種主流關係型資料庫;熟悉Linux作業系統,熟練使用常用命令,熟練使用shell指令碼;熟悉ETL開發,能熟練至少一種ETL(talend、kettle、ogg等)轉化開源工具者優先;
4.具有清晰的系統思維邏輯,對解決行業實際問題有濃厚興趣,具備良好的溝通協調能力及學習能力。
以上就是想要成為大資料人才需要具備的技能
那麼如何具備這些能力,怎麼學習了,對於大多數人來說,目前只有透過參加大資料的學習,才能夠系統的掌握以上的大資料技能,從而勝任大資料工程師的工作。
-
3 # Alan53154481
看哪個方向了,基本hadoop,hive,hbase,es這些大資料元件都會要用,原始碼級別的更深入的開發需要會,redis,kafka等,語言基本java,python,資料分析要會R等
Java基礎
HTML、CSS與Java
Linux&Hadoopt體系
Spark生態體系
Storm生態體系
實戰:資料獲取、資料處理、資料分析、資料應用
等等...