2. 針對智慧城市,工業(yè)互聯(lián)網(wǎng)等大數(shù)據(jù)應用場景提出大數(shù)據(jù)平臺技術開發(fā)方案和開發(fā)落地計劃并開展工作;
3. 指導大數(shù)據(jù)技術團隊提供并實現(xiàn)大數(shù)據(jù)算法平臺上各項數(shù)據(jù)接入、數(shù)據(jù)挖掘分析及數(shù)據(jù)可視化的架構設計與能力,支持解決方案實施。
4. 銜接并落實業(yè)務場景、大數(shù)據(jù)技術開發(fā)、應用架構整體解決方案的制定和執(zhí)行;
5. 與高校教授合作,支撐科技技術轉換,將算法、模型等關鍵技術在大數(shù)據(jù)平臺接入,開發(fā)形成新的人工智能和機器學習算法。
6. 指導工程師進行技術驗證實現(xiàn),核心技術攻關,解決開發(fā)過程中技術難題。
任職要求:
1. 具有8年及以上大數(shù)據(jù)架構設計和開發(fā)經驗;
2年及以上帶領團隊經驗;溝通能力強;碩士及以上學歷。在互聯(lián)網(wǎng)企業(yè)或工業(yè)企業(yè)從事大數(shù)據(jù)架構設計者優(yōu)先考慮;有分布式軟件系統(tǒng)設計經驗、主導過大型軟件架構設計并取得過成功案例者優(yōu)先考慮;
3. 熟悉整個大數(shù)據(jù)的完整處理流程,包括數(shù)據(jù)的采集、清洗、預處理、存儲、分析挖掘、機器學習和數(shù)據(jù)可視化;
4. 對大數(shù)據(jù)基礎架構和平臺有深刻理解,對大數(shù)據(jù)生態(tài)體系有深入認識,熟悉大數(shù)據(jù)平臺的各種開源項目,掌握Hive、Spark、Streaming、Storm、Kafka等數(shù)據(jù)處理核心組件;對HDFS、M/R、Yarn的原理有深入了解,掌握系統(tǒng)優(yōu)化、資源分配與權限控制。了解數(shù)據(jù)湖Kylo和Lambda架構。
5. 熟悉Java/Python/Scala等一種或多種語言,熟悉Redis/MySQL,熟悉Linux平臺。
6. 在智慧城市“自動化,信息化,數(shù)字化,網(wǎng)絡化和智能化”其中一化或者多化有相關項目經驗;深入理解業(yè)務中臺、數(shù)據(jù)中臺架構理念,并具有一定的實踐經驗。