軟件工程師
職位年薪:28萬
企業(yè)名稱:杭州某大型軟件公司
崗位職責:
1.參與大數據平臺搭建以及項目技術架構。
2.負責大數據平臺核心業(yè)務功能的設計和研發(fā)、實時計算和離線計算功能的研發(fā)。
3.負責企業(yè)級數據倉庫的設計和研發(fā),海量數據的模型設計和優(yōu)化,數據ETL流程的研發(fā)。
4.負責大數據平臺的框架設計及核心代碼編寫,部署。
5.對各類數據進行采集、存儲、管理、分析、建模、作業(yè)調度、持續(xù)維護。
6.負責大數據平臺的監(jiān)控及優(yōu)化,針對持續(xù)增長的數據提供相應的解決方案。
任職要求:
1.計算機相關專業(yè),本科及以上學歷,5年以上工作經驗。
2.熟悉Hadoop生態(tài)和體系架構,熟悉Flink、 Spark,Hive等常用開源工具。
3.了解調度系統(tǒng),能夠編寫調度任務腳本。
4.精通數據倉庫有關領域知識,例如數據分層、元數據管理、ETL工作流、SQL性能調優(yōu)等。
5.熟悉Linux/Unix系統(tǒng),掌握一門或多門編程語言,如Java、Python、Scala等。
職位周期:16天
推薦新聞