職位描述
職責(zé):1. 設(shè)計與開發(fā)ETL流程:2. 數(shù)據(jù)管道優(yōu)化:3. 數(shù)據(jù)集成與管理:4.GCP Dataflow開發(fā):6. 自動化與監(jiān)控:7. 數(shù)據(jù)治理與安全:8. 文檔與知識共享:任職要求:- 教育背景:- 計算機科學(xué)、信息系統(tǒng)或相關(guān)領(lǐng)域的學(xué)士學(xué)位。- 經(jīng)驗:- 至少5年數(shù)據(jù)工程或ETL開發(fā)行業(yè)經(jīng)驗,重點關(guān)注Data Stage和GCP。- 有設(shè)計和實施ETL解決方案的經(jīng)驗,包括數(shù)據(jù)建模、數(shù)據(jù)倉庫和SQL開發(fā)。- 技術(shù)技能:- 熟悉云服務(wù)(如BigQuery、Dataflow、Cloud Storage、Pub/Sub)及其在數(shù)據(jù)工程中的應(yīng)用。- 有基于云的解決方案經(jīng)驗,尤其是GCP,持有云認證者優(yōu)先。- 具備批處理和流式處理的大數(shù)據(jù)經(jīng)驗,熟悉大數(shù)據(jù)生態(tài)系統(tǒng)(如Hadoop、HBase、Hive、MapReduce、Kafka、F****、Spark等)。- 熟悉Java和Python在云/大數(shù)據(jù)平臺上的數(shù)據(jù)操作。
企業(yè)介紹
軟通動力——中國領(lǐng)先的技術(shù)服務(wù)提供商及全球客戶首選合作伙伴
軟通動力是中國領(lǐng)先的技術(shù)服務(wù)提供商,立足中國,服務(wù)全球市場。軟通動力具有端到端“軟件+服務(wù)”綜合服務(wù)能力,服務(wù)范圍包括:咨詢服務(wù)、解決方案及系統(tǒng)集成服務(wù)、IT外包及業(yè)務(wù)流程外包服務(wù)等。在高科技/通信、銀行/企業(yè)金融/保險、電力/能源/水務(wù)/環(huán)保、交通/物流、汽車/制造、零售/電商等10多個重要行業(yè)及業(yè)務(wù)領(lǐng)域,軟通動力具有強大的縱深服務(wù)優(yōu)勢。
過去,軟通動力深刻理解客戶需求,是企業(yè)盈利和成長的最佳合作伙伴;今天,軟通動力充分把握科技大勢,借助云計算、移動互聯(lián)、大數(shù)據(jù)等新興技術(shù)手段,和合作伙伴一起推出創(chuàng)新型解決方案,致力于幫助我們的客戶成為智慧的政府和智慧的企業(yè);未來,軟通動力將不懈努力,以創(chuàng)新思維和領(lǐng)先技術(shù),為客戶創(chuàng)造可持續(xù)的價值。
軟通動力于2001年創(chuàng)立,全球總部設(shè)于北京,在全球設(shè)有30多個分支機構(gòu),28個交付中心。員工總數(shù)超過1萬8千人,服務(wù)數(shù)百家中國及海外客戶。