職位描述
該職位還未進行加V認證,請仔細了解后再進行投遞!
總體要求,對大數據對應的技術可以叫數據技術(data technology, DT) 有深刻理解,懂相關理論也有具體實踐,能夠站在數據的角度去理解和學習新的業務,有實踐經驗,并知曉或總結其中的方法。 1.精通數據倉庫實施方法論,2年以上企業級離線數據倉庫及實時數倉的建設經驗,有成功的大型公司數據倉庫實施經驗; 2.具備基于阿里/華為大數據平臺豐富的數據中臺開發經驗(熟練掌握Maxcompute、Dataworks、Blink、Flink等阿里云開發組件),具有元數據、數據質量以及離線實時一體化數倉等開發經驗; 3.具有很強的數據建模、分析和邏輯推理能力,能根據業務選取最合適的建模方法,對維度建模有深刻的認識和豐富的經驗; 4. 精通大數據相關框架和前沿技術組件,具體如下: ①熟練使用spark,hive開發,能夠解決海量數據計算調優問題,合理進行資源調配,能夠對源碼進行重構經驗者優先; ②對實時計算體系有自己的見解,深入了解Flink、Spark Streaming等流式處理框架,實時開發經驗豐富,熟悉性能瓶頸和使用特點; ③掌握hudi相關技術和架構,數據湖的構建、管理與應用,深刻了解其表組件(有序時間軸元數據,分層布局的數據文件,索引),存儲類型和讀寫操作; ④熟練掌握presto高性能查詢引擎,對其擴展性和混合計算有深刻認識,了解s3對象存儲技術,熟練掌握clickhouse列式存儲和內部架構; ⑤了解其他的大數據生態技術棧,如hbase,kafka,mysql,SQL Serve,Nosql等; 5. 有電網項目經驗者優先; 6. 扎實的編程基礎和動手能力,精通至少一門編程語言。
工作地點
地址:南京南京


職位發布者
HR
江蘇瑞中數據股份有限公司

-
通信/電信/網絡設備/增值服務
-
200-499人
-
國有企業
-
雨花臺區軟件大道180號南京大數據產業基地B6幢