職位描述
該職位信息待核驗,請仔細了解後再進行投遞!
崗位職責:
1.負責設計並實施分布式數據平台架構,優化數據存儲、處理和分析流程。參與大數據平台產品的規劃、設計、開發和迭代,提升平台的穩定性、可擴展性和易用性。
2.基於Hadoop、Spark、Flink等大數據處理框架,設計並實現高效的海量數據模型,確保數據的高效存儲與訪問。負責數據開發流程,包括數據清洗、轉換、加載及數據治理工作,以滿足業務對數據的高並發訪問需求。
3.利用開源框架進行大數據的采集工作,確保數據的完整性、準確性和及時性。進行深度數據分析,挖掘數據價值,為業務決策提供數據支持。整理分析結果,形成清晰、易於理解的報告或可視化展示。
4.針對大數據處理過程中的性能瓶頸,進行調優和故障排查。利用Hadoop、Spark、Flink等技術的特性,優化資源配置和作業調度,提高數據處理效率。
5.關注大數據領域的新技術、新趨勢,探索其在業務中的應用可能性,推動技術升級和創新。
任職要求:
1.擁有5年或以上大數據開發經驗,其中至少3年專注於大數據架構設計與實現。具備紮實的大數據理論基礎和實踐經驗,能夠獨立完成複雜的大數據項目。
2.具備豐富的大數據架構設計經驗,能夠根據業務需求設計高可用、可(ke)擴(kuo)展(zhan)的(de)大(da)數(shu)據(ju)平(ping)台(tai)架(jia)構(gou)。熟(shu)悉(xi)分(fen)布(bu)式(shi)係(xi)統(tong)原(yuan)理(li),能(neng)夠(gou)設(she)計(ji)並(bing)實(shi)施(shi)分(fen)布(bu)式(shi)數(shu)據(ju)存(cun)儲(chu)和(he)處(chu)理(li)方(fang)案(an)。能(neng)夠(gou)評(ping)估(gu)新(xin)技(ji)術(shu)在(zai)大(da)數(shu)據(ju)平(ping)台(tai)上(shang)的(de)應(ying)用(yong)潛(qian)力(li),並(bing)進(jin)行(xing)技(ji)術(shu)選(xuan)型(xing)與(yu)集(ji)成(cheng)。
3.熟練掌握Hadoop、Spark、Flink等大數據核心技術,能夠針對不同量級的數據量進行配置調優和組件維護。熟悉Hbase、Hdfs、MapReduce、Yarn、Zookeeper、Hive、Kafka等大數據生態係統中的關鍵組件,能夠閱讀並理解源碼,解決複雜問題。了解並能應用NoSQL數據庫(如MongoDB、Cassandra等)以及實時數據流處理技術(如Storm、Samza等)。
4.具備豐富的海量數據性能處理經驗,能夠基於Hive和MySQL進行SQL優化,提升查詢效率。熟悉數據分區、索引、huancundengcelve,nenggoushejibingshishiyouxiaodeshujuyuchulihecunchufangan,jiangdishujuchulichengben。nenggoukuaisudingweibingjiejuedashujuchuliguochengzhongdexingnengpingjingheguzhangwenti。
5.熟悉數據倉庫建模方法,能夠設計合理的數據模型以滿足業務需求。具備數據質量與數據治理經驗,了解數據生命周期管理、數據安全管理等相關知識。能夠製定並執行數據治理策略,確保數據的準確性、完整性和一致性。
6.熟練使用Java核心框架,如Spring
工作地點
地址:武漢洪山區武漢-洪山區慧穀大廈A棟11樓
📍
點擊查看地圖
詳細位置,可以參考上方地址信息
求職提示:用人單位發布虛假招聘信息,或以任何名義向求職者收取財物(如體檢費、置裝費、押金、服裝費、培訓費、身份證、畢業證等),均涉嫌違法,請求職者務必提高警惕。
職位發布者
盛博彙HR
武漢盛博彙信息技術有限公司
-
計算機軟件
-
200-499人
-
公司性質未知
-
大學園路13號-1華中科技大學科技園現代服務業基地1號研發樓b座9層5號

武漢
應屆畢業生
本科
2026-05-11 11:47:54
3195人關注
注:聯係我時,請說是在福建人才網上看到的。
