大數據開發工程師
職位描述
工作內容:
1. 負責高性能、高可用的大數據數據處理與分析paas軟件的研發。
2. 參與包含數據集成系統、元數據管理、數據質量管理等平臺的構建與維護;
3. 團隊合作,參與海量數據導入、分布式存儲、計算引擎的技術調研與攻關。
任職要求:
1. 本科及以上學歷,計算機相關專業;
2. 扎實的計算機基礎,掌握常用的數據結構及算法,熟練掌握Scala/Python/go/Java 中的一項或多項;
3. 了解分布式系統、大數據平臺,有完整的數據工程項目經驗,具備一定的框架設計以及抽象能力;
4. 熟悉 Hadoop 生態體系,包括但不限于:Hadoop、Hive、HBase、Spark、Flink、Kafka、Beam 等;
5. 良好的團隊精神以及合作意識,熱愛技術,高度自驅,追求卓越,對數據敏感;
6. 對批量計算、流式計算、時序數據處理、存儲引擎、資源調度等一項或多項有深入理解優先