大数据七大岗位及职责
生活随笔
收集整理的這篇文章主要介紹了
大数据七大岗位及职责
小編覺得挺不錯的,現在分享給大家,幫大家做個參考.
大數據崗位及職責
數據運維工程師
1. 協調機器資源、采購、縮減、預算等等 2. 集群組件的維護、升級 3. 處理集群和用戶的各種問題 4. 如果公司采購了阿里/網易這樣的數據平臺就會相對省心數據平臺開發工程師
1. 需要熟悉大數據開源組件、有必要的話可以進行二次開發 2. 基礎平臺開發開發面向數據平臺使用的工具,比如元數據系統、數據質量、數據采集、數據計算平臺、任務調度等,自研或者基于開源的項目進行二次開發 3.數據產品開發開發面向產品和數據分析師的工具:數據報表平臺、數據分析平臺、數據查詢平臺(AdHoc)等數據倉庫工程師
1. 離線數倉的開發,比如數倉建模、數據清洗 2. 實時數倉:實時指標的開發,使用Spark Streaming、Flink 3. 主要是寫SQL,需要理解業務,開發業務報表數據測試工程師
1. 一般公司沒有這個崗位,由數據倉庫工程師兼任,也就是自測 2. 測試數倉開發的指標邏輯、數據的準確性 3. 測試業務埋點上報的準確性數據分析師
不同的公司有不同叫法:比如阿里的BI,美團的商分 1. 指標體系的拆解&建設 2. 從巨大的數據金礦中挖掘出有價值的知識,形成分析報告;推動優化業務。算法工程師
1. 語音、圖像、自然語言處理、深度學習等機器學習算法開發及優化 2. 挖掘并推進算法在業務中應用比如字節調動旗下的抖音的算法 3. 推薦系統、用戶畫像數據產品經理
1. 協助公司各業務方向大數據應用產品調研、規劃、執行 2. 數據產品的開發規劃管理工作,確保項目按照需求如期完成總結
以上是生活随笔為你收集整理的大数据七大岗位及职责的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 当物流行业遇见MongoDB
- 下一篇: 房地产企业与项目管理