大數(shù)據(jù)開發(fā)工程師
職位描述
工作內(nèi)容:
1. 負(fù)責(zé)高性能、高可用的大數(shù)據(jù)數(shù)據(jù)處理與分析paas軟件的研發(fā)。
2. 參與包含數(shù)據(jù)集成系統(tǒng)、元數(shù)據(jù)管理、數(shù)據(jù)質(zhì)量管理等平臺的構(gòu)建與維護(hù);
3. 團(tuán)隊(duì)合作,參與海量數(shù)據(jù)導(dǎo)入、分布式存儲(chǔ)、計(jì)算引擎的技術(shù)調(diào)研與攻關(guān)。
任職要求:
1. 本科及以上學(xué)歷,計(jì)算機(jī)相關(guān)專業(yè);
2. 扎實(shí)的計(jì)算機(jī)基礎(chǔ),掌握常用的數(shù)據(jù)結(jié)構(gòu)及算法,熟練掌握Scala/Python/go/Java 中的一項(xiàng)或多項(xiàng);
3. 了解分布式系統(tǒng)、大數(shù)據(jù)平臺,有完整的數(shù)據(jù)工程項(xiàng)目經(jīng)驗(yàn),具備一定的框架設(shè)計(jì)以及抽象能力;
4. 熟悉 Hadoop 生態(tài)體系,包括但不限于:Hadoop、Hive、HBase、Spark、Flink、Kafka、Beam 等;
5. 良好的團(tuán)隊(duì)精神以及合作意識,熱愛技術(shù),高度自驅(qū),追求卓越,對數(shù)據(jù)敏感;
6. 對批量計(jì)算、流式計(jì)算、時(shí)序數(shù)據(jù)處理、存儲(chǔ)引擎、資源調(diào)度等一項(xiàng)或多項(xiàng)有深入理解優(yōu)先