職位描述
該職位還未進行加V認證,請仔細了解后再進行投遞!
崗位職責:
● 負責公司內部數(shù)據湖/數(shù)據倉庫的基礎設施建設 ,打造高效 、可靠的數(shù)據聚合和清洗平 臺, 為人工智能應用提供高質量的數(shù)據支撐。
設計和實現(xiàn)數(shù)據聚合 、清洗 、轉換和加載( ETL) 流程 ,確保數(shù)據的準確性 、完整性 和一致性, 支持公司內部的業(yè)務需求和數(shù)據分析工作。
● 優(yōu)化數(shù)據處理流程和架構, 結合公司內部離線 、實時和AI應用場景, 進行深度開發(fā)和 優(yōu)化, 提升數(shù)據處理效率和性能。
● 支持大模型訓練和微調工作, 與算法工程師緊密合作, 提供數(shù)據支持和優(yōu)化建議,確 保數(shù)據能夠高效地用于模型訓練和微調。
● 編寫數(shù)據開發(fā)文檔, 記錄數(shù)據處理流程 、數(shù)據架構設計和技術實現(xiàn)細節(jié), 為團隊成員 提供技術指導和參考。
● 協(xié)助業(yè)務部門處理海量數(shù)據 ,解決數(shù)據處理過程中的疑難問題, 充分發(fā)揮數(shù)據價值, 為業(yè)務決策提供支持。
● 持續(xù)優(yōu)化數(shù)據平臺的性能和穩(wěn)定性 ,確保數(shù)據處理的高并發(fā) 、高可用性和高可靠性。
任職要求:
● 本科及以上學歷, 計算機及相關專業(yè) ,5年以上大數(shù)據開發(fā) 、數(shù)據倉庫建設或相關領域 工作經驗。
● 具備豐富的數(shù)據湖/數(shù)據倉庫建設經驗, 熟悉數(shù)據聚合 、清洗 、轉換和加載( ETL) 流 程, 能夠高效地設計和實現(xiàn)數(shù)據處理架構。
● 熟練掌握至少一種主流的大數(shù)據處理技術棧, 如Hadoop 、Spark 、Flink 、Hive、 Presto等, 能夠基于這些技術進行深度開發(fā)和優(yōu)化。
● 熟悉數(shù)據倉庫建模和設計, 能夠根據業(yè)務需求設計高效 、可擴展的數(shù)據模型, 支持離 線 、實時和AI應用場景。
● 具備數(shù)據處理性能優(yōu)化經驗, 能夠針對大規(guī)模數(shù)據處理任務進行調優(yōu) ,確保數(shù)據處理 的高并發(fā) 、高可用性和高可靠性。
● 熟悉機器學習和深度學習的基本概念, 了解大模型訓練和微調的基本流程,能夠為算 法工程師提供數(shù)據支持和優(yōu)化建議。
● 熟練掌握至少一種編程語言 (Java 、Python 、Go等), 具備良好的編程習慣和代碼規(guī) 范意識, 能夠編寫高質量 、可維護的代碼。
● 熟悉Linux操作系統(tǒng), 具備扎實的數(shù)據結構和算法基礎, 能夠高效地處理復雜的數(shù)據問 題。
有以下經驗者優(yōu)先:
● 參與過數(shù)據湖/數(shù)據倉庫的完整建設周期, 包括需求分析 、設計 、開發(fā) 、測試和部署。
● 有源碼級優(yōu)化經驗或深入研究者優(yōu)先, 開源社區(qū)優(yōu)秀項目Contributor 、Committer優(yōu) 先。
● 熟悉多云環(huán)境下的數(shù)據處理和存儲解決方案, 具備相關實踐經驗。
● 有處理大規(guī)模數(shù)據和高并發(fā)請求的經驗, 具備分布式系統(tǒng)開發(fā)和運維能力 。
備注:薪資面議
工作地點
地址:蘇州吳江區(qū)蘇州-吳江區(qū)盛虹集團有限公司
??
點擊查看地圖
詳細位置,可以參考上方地址信息
求職提示:用人單位發(fā)布虛假招聘信息,或以任何名義向求職者收取財物(如體檢費、置裝費、押金、服裝費、培訓費、身份證、畢業(yè)證等),均涉嫌違法,請求職者務必提高警惕。
職位發(fā)布者
HR
盛虹控股集團有限公司
-
石油·石化·化工
-
1000人以上
-
股份制企業(yè)
-
吳江區(qū)盛澤紡織科技示范園

應屆畢業(yè)生
本科
2026-01-23 04:22:27
676人關注
注:聯(lián)系我時,請說是在江蘇人才網上看到的。
