回覆列表
  • 1 # 塵世中一顆迷途小書童

    Etl工程師,是大資料數倉方向的一個職位,主要是做資料清洗,抽取,轉換,目前的話主要已hadoop的hdfs作為儲存平臺,hive作為資料建模,清洗,結構化資料的分析,使用工具或者指令碼,匯入到關係型資料庫資料結,作為結果資料,供後續各部門使用。

    一般的工作應該是hiveSql進行資料分析統計,shell指令碼或者job依賴性強的工具如oozie做任務週期排程

    發展空間很大,用sql實現業務可以鍛鍊思維邏輯,增加工作經驗,後續可以做資料建模工程師,可以指導小兵做日常開發,而且工資很樂可觀

  • 2 # 敏捷排程TASKCTL

    ETL工程師是資料行業裡需求量大,並且門檻相對較低的職位,作為想要進入資料領域的新人是個不錯的選擇。

    不過,ETL工程師做的是一些偏底層的髒活累活,不容易體現價值,一般3~5年後就會達到職業瓶頸。

    當然,這個職位雖然是偏底層,但是接觸的內容對整個資料架構中各個部分都有涉及,甚至還會包括一些業務知識,所以在工作中能夠有意識的從更高層面來審視資料領域的問題,建立自己的方法論和技術框架,後期的爆發力是非常強的。

    就好比王者中的戰士,前期猥瑣發育,後期發展起來是可以帶動全場的

  • 中秋節和大豐收的關聯?
  • 高中學歷學會計可以嗎?