數(shù)據(jù)倉庫工程師崗位的基本職責(精選16篇)
數(shù)據(jù)倉庫工程師崗位的基本職責 篇1
職責:
1、深入理解業(yè)務,了解需求和痛點,為風控和業(yè)務部門提供數(shù)據(jù)支持;
2、針對業(yè)務需求,參與數(shù)據(jù)倉庫需求分析,制定ETL相關設計方案和開發(fā)計劃;
3、負責數(shù)據(jù)同步,數(shù)據(jù)整合清洗,以及數(shù)據(jù)質量的治理;
4、數(shù)據(jù)倉庫模型設計,分層體系構建,元數(shù)據(jù)管理監(jiān)控以及權限控制。
任職資格:
1、重點院校統(tǒng)招本科及以上學歷,計算機基礎扎實;
2、具有2年以上金融貸款類業(yè)務經驗;
3、熟悉數(shù)據(jù)倉庫理論和數(shù)據(jù)庫建模,有redshift和AWS經驗優(yōu)先;
4、精通pgsql/mysql等數(shù)據(jù)庫,精通sql語言,具有數(shù)據(jù)庫優(yōu)化/sql優(yōu)化相關經驗;
5、熟練掌握python/shell語言。
數(shù)據(jù)倉庫工程師崗位的基本職責 篇2
職責:
1、負責大數(shù)據(jù)開發(fā)工作;
2、負責公司數(shù)據(jù)服務接口平臺的建設;
3、參與打造數(shù)據(jù)中臺內容的規(guī)劃、設計、開發(fā)工作,實現(xiàn)高質量數(shù)據(jù)的互通與共享; 4、參與數(shù)據(jù)模型體系構建及數(shù)據(jù)主題設計和開發(fā),搭建離線、近線、實時數(shù)據(jù)公共層;
5、參與構建非結構化數(shù)據(jù)體系,進行網絡數(shù)據(jù)爬取,數(shù)據(jù)清洗,特征挖掘,統(tǒng)計分析,并結合應用場景實現(xiàn)落地。
崗位要求:
1、本科以上學歷,計算機、數(shù)學、統(tǒng)計學等相關專業(yè);
2、熟悉數(shù)據(jù)集成、數(shù)據(jù)倉庫、數(shù)據(jù)分析等全流程數(shù)據(jù)處理,具備開源或阿里大數(shù)據(jù)平臺實戰(zhàn)經驗,如hive/spark/Maxcompute;
3、熟悉數(shù)據(jù)治理體系,包括數(shù)據(jù)模型、數(shù)據(jù)標準、數(shù)據(jù)質量等;
4、熟悉常見的離線、實時、流式數(shù)據(jù)應用場景及架構;
5、至少掌握一門開發(fā)語言,Java/Python;
6、具備良好的溝通能力和設計文檔編寫能力;
7、懂數(shù)據(jù)挖掘、知識圖譜的構建者優(yōu)先。
數(shù)據(jù)倉庫工程師崗位的基本職責 篇3
職責:
1、負責金融行業(yè)數(shù)據(jù)倉庫開發(fā)工作
2、負責與多個應用對接的接口和框架設計
3、充分理解產品需求,能夠結合需求進行任務設計,完成詳細設計文檔的編寫。
崗位要求:
1. 從事數(shù)據(jù)倉庫及商業(yè)智能(BI)領域工作至少3年以上,熟悉數(shù)據(jù)倉庫模型設計方法論,并有實際的模型設計經驗,有大型數(shù)倉建設經驗優(yōu)先;
2. 精通數(shù)據(jù)倉庫領域知識和管理技能,包括但不局限于:元數(shù)據(jù)管理、數(shù)據(jù)質量、主數(shù)據(jù)管理、性能調優(yōu)等;
3.有主流商業(yè)/開源ETL工具(Informatica、Datastage、Kettle等)使用經驗者優(yōu)先;
4. 熟悉Hadoop生態(tài)相關技術并有相關實踐經驗,包括Hdfs、Map-Reduce、Hive、Hbase、Spark等,具備海量數(shù)據(jù)加工處理(ETL)相關經驗;
5. 熟練使用java語言,對微服務架構有一定了解;
6. 具有較強的團隊意識與良好的溝通能力及高度的工作責任感,熱愛技術,有很強的鉆研能力,樂于接受有挑戰(zhàn)性的任務;
7、有團隊管理經驗優(yōu)先。
數(shù)據(jù)倉庫工程師崗位的基本職責 篇4
職責:
負責大數(shù)據(jù)數(shù)據(jù)倉庫的建設,根據(jù)數(shù)據(jù)倉庫及BI項目的需求,制定相關的設計方案和開發(fā)計劃;
參與數(shù)據(jù)的分析處理和數(shù)據(jù)統(tǒng)計內容的架構設計與研發(fā);
組織項目組成員完成數(shù)據(jù)倉庫的開發(fā)和運維等;
負責公司數(shù)據(jù)規(guī)范、數(shù)據(jù)標準、數(shù)據(jù)指標梳理與定義;
協(xié)助技術人員完成數(shù)據(jù)管控平臺的搭建,完成數(shù)據(jù)規(guī)范管理體系到信息平臺的落地實施;
組織開展對數(shù)據(jù)平臺各模塊的內容進行培訓;
制定和審計業(yè)務系統(tǒng)數(shù)據(jù)數(shù)據(jù)庫模型設計規(guī)范;
任職資格:
有一定的互聯(lián)網數(shù)據(jù)倉庫經驗;
深入了解 Hadoop 生態(tài)系統(tǒng),熟悉HBase、Hive、Storm、spark等大數(shù)據(jù)開發(fā)工具中一種或幾種;
具備大型數(shù)據(jù)倉庫架構設計、模型設計、ETL 設計的相關經驗;
關系型數(shù)據(jù)庫原理基礎扎實,熟悉 MySQL/PostgreSQL等的使用和調優(yōu);
有獨立設計數(shù)據(jù)倉庫經驗、熟悉數(shù)據(jù)倉庫相關理論知識者優(yōu)先;
數(shù)據(jù)倉庫工程師崗位的基本職責 篇5
職責:
1.參與打造數(shù)據(jù)中心內容的規(guī)劃、設計、開發(fā)和優(yōu)化工作,實現(xiàn)高質量數(shù)據(jù)的互通與共享;
2.參與數(shù)據(jù)模型體系構建及數(shù)據(jù)主題設計和開發(fā),搭建離線、實時數(shù)據(jù)倉庫;
3.參與數(shù)據(jù)產品與應用的數(shù)據(jù)研發(fā);
4.負責日常應用系統(tǒng)監(jiān)控,發(fā)現(xiàn)異常問題及時分發(fā),并跟進后續(xù)處理;
5.編寫Python程序,或ETL技術完成日常數(shù)據(jù)抽取和整理任務,可獨立進行數(shù)據(jù)分析;
崗位要求:
1.熟悉ETL開發(fā)、數(shù)據(jù)倉庫設計流程,熟悉Oracle, MS SQL Server 等主流數(shù)據(jù)庫,表結構設計,存儲過程編寫;
2.熟練掌握常用Linux命令,具備shell編程能力,熟練掌握Python編程語言
3.具有較強的語言表達和溝通能力,良好的團隊合作精神
4.邏輯思維能力強,對數(shù)據(jù)敏感,有較強學習能力和創(chuàng)新思維;
5.具有高度的責任感和敬業(yè)精神,能夠承受較大的工作壓力
數(shù)據(jù)倉庫工程師崗位的基本職責 篇6
1. 負責煉油項目的工藝裝置、公用工程及輔助工程等統(tǒng)籌建設工作。
2. 對項目的施工技術管理工作全面負責,貫徹執(zhí)行國家有關技術政策、法規(guī)和現(xiàn)行施工技術規(guī)范、規(guī)程、質量標準以及承包合約要求,并監(jiān)督實施執(zhí)行情況。
3. 根據(jù)集團管理規(guī)定和項目特點,提出項目管理組織機構的建議方案,確定崗位職責,制定項目管理工作流程;
4. 組織編制項目實施規(guī)劃、開工報告、HSE計劃書、質量計劃等項目實施指導性文件,按規(guī)定報批并組織實施;
5. 妥善處理項目立項,報批,設計管理,施工管理,交付驗收等全過程管理內部各部門及外部機構之間的對接及溝通工作,保持設計、監(jiān)理和施工單位等之間的良好工作關系,使項目順利進行;
6. 定期召開項目例會,檢查項目進度、費用、質量及HSE等計劃的執(zhí)行情況,對存在的問題及時協(xié)調解決(特別是計劃審批、工程變更、事故處理、合同爭議、工程索賠、實施方案等),滿足項目要求;
7. 負責裝置生產人員技術指導和技能培訓等工作;
8. 參與工程竣工驗收,確保工程成為合格、合法固定資產。
數(shù)據(jù)倉庫工程師崗位的基本職責 篇7
1、負責所調試項目的調試方案編制、技術培訓等工作;
2、參與裝置水聯(lián)動前的聯(lián)合驗收,監(jiān)督、核實缺陷處理情況;
3、負責裝置水聯(lián)動、整套啟動、負荷通煙氣運行,指導業(yè)主操作人員運行;
4、收集整理運行數(shù)據(jù),協(xié)助公司技術部門解決裝置工藝、技術問題;
5、負責裝置72h或168h性能考核,編制性能考核報告;
6、工程項目質保期內服務,在收到業(yè)主通知或公司安排后及時聯(lián)系,有需要立即到場進行服務;
7、參與工程項目移交并到場核對驗證,與業(yè)主建立聯(lián)系;
8、質保期結束前質保金支付事宜的跟進、手續(xù)辦理;
9、對工程項目存在問題、裝置共性問題及疑難問題及時提出匯總給公司技術部門;
10、在工作過程中注意維護公司形象,保守公司機密,宣傳公司品牌及文化。
數(shù)據(jù)倉庫工程師崗位的基本職責 篇8
職責:
參與數(shù)據(jù)倉庫模型設計和開發(fā)工作;
負責建立數(shù)據(jù)分析模型,設計前端報表,數(shù)據(jù)可視化開發(fā);
負責數(shù)據(jù)平臺項目數(shù)據(jù)倉庫的管理、性能監(jiān)控及優(yōu)化等;
負責數(shù)據(jù)平臺的日常運維及優(yōu)化
職位要求:
大學本科以上學歷,3年以上工作經驗,包含2年以上數(shù)據(jù)倉庫開發(fā)工作經驗;
精通數(shù)據(jù)倉庫建設,熟悉常用的模型設計方法;
對數(shù)據(jù)可視化有豐富的經驗,熟悉常用的數(shù)據(jù)分析方法;熟悉至少一種報表工具開發(fā);
精通數(shù)據(jù)倉庫領域知識和技能,包括元數(shù)據(jù)管理、主數(shù)據(jù)管理、數(shù)據(jù)質量管理等;
熟練使用ETL工具如Kettle、SSIS等進行數(shù)據(jù)清洗、轉換、整合;
熟悉至少兩種關系型數(shù)據(jù)庫,如Oracle、SQL Server、PostgreSQL、MySql等主流數(shù)據(jù)庫,精通SQL Server開發(fā)和運維者優(yōu)先考慮;
有完整的數(shù)據(jù)平臺建設經驗者優(yōu)先;
熟悉使用Linux系統(tǒng)及Shell腳本開發(fā),熟練開發(fā)Python程序者優(yōu)先;
熟悉大數(shù)據(jù)開發(fā)框架者優(yōu)先,如Spark,F(xiàn)link等;
對新技術好奇愛學習,主動性和責任心強,對數(shù)據(jù)敏感,邏輯性強,有良好的抗壓能力;
團隊協(xié)作能力強
數(shù)據(jù)倉庫工程師崗位的基本職責 篇9
1、負責整車動力學性能屬性管理,整個底盤系統(tǒng)的產品開發(fā)交付,包括:懸架系統(tǒng)、軸系統(tǒng)、制動系統(tǒng)和轉向系統(tǒng)
2、負責底盤系統(tǒng)的開發(fā)計劃(依據(jù)項目開發(fā)節(jié)點),底盤系統(tǒng)零部件結構設計;
3、負責底盤的性能開發(fā),設計驗證CAE仿真及試驗跟蹤,反饋以及設計優(yōu)化,如相關的整車/零部件驗證計劃
4、負責項目開發(fā)階段的供應商管理,尤其對高風險供應商的管理
5、負責底盤系統(tǒng)產品的質量提升、質量改進工作及設計改進
數(shù)據(jù)倉庫工程師崗位的基本職責 篇10
職責:
1、負責制定數(shù)據(jù)倉庫平臺技術體系架構、數(shù)據(jù)架構及規(guī)范;
2、負責設計和實施公司業(yè)務數(shù)據(jù)的實時/離線數(shù)據(jù)ETL架構方案;
3、負責調度架構設計與開發(fā);
4、負責數(shù)據(jù)倉庫平臺運維以及日常數(shù)據(jù)運營等管理;
5、負責關鍵技術攻關;
崗位要求:
1、計算機、數(shù)學、統(tǒng)計等相關專業(yè)本科及以上學歷,3年以上數(shù)據(jù)倉庫項目開發(fā)經驗,參與過數(shù)據(jù)倉庫架構設計,對ETL開發(fā)流程、調度架構有深入理解;
2、精通mysql等數(shù)據(jù)庫,豐富的SQL性能調優(yōu)經驗;
3、熟練使用Java、Shell等腳本語言;
4、熟悉數(shù)據(jù)治理理論,數(shù)據(jù)質量、元數(shù)據(jù)管理流程和方法;
5、了解Hadoop/Hive/HBase/Spark/Storm等技術及其生態(tài)圈;
6、溝通能力好、責任心強,具有良好的團隊合作精神和敬業(yè)精神;
數(shù)據(jù)倉庫工程師崗位的基本職責 篇11
1、根據(jù)平臺要求,檢查和轉換數(shù)字化模型,保證模型的精度和完整性,管理和更新產品目錄;
2、持續(xù)規(guī)范并優(yōu)化建模流程,提高建模標準;
3、產品模型相關功能的調研和測試工作;
4、根據(jù)研發(fā)需求,抽取模型建模相關信息。
數(shù)據(jù)倉庫工程師崗位的基本職責 篇12
職責
1、負責數(shù)據(jù)庫及操作系統(tǒng)的日常維護,數(shù)據(jù)庫性能監(jiān)控及優(yōu)化,故障診斷和排除;
2、制定并實施數(shù)據(jù)備份、恢復、復制計劃,以及數(shù)據(jù)庫的安全管理、用戶管理;
3、負責數(shù)據(jù)庫項目的安裝、部署、維護等工作;
4、完成領導安排的其他工作。
任職資格
1、計算機相關專業(yè)畢業(yè),3年以上工作經驗。
2、精通oracle,熟悉mysql/mariadb,sql server。
3、能對oracle rac/ADG,mysql/mariadb、sqlsever集群環(huán)境進行安裝配置、性能優(yōu)化,故障處理。
4、能熟練對數(shù)據(jù)庫進行備份恢復、數(shù)據(jù)遷移。
6、熟悉oracle12C 多租戶環(huán)境的維護,配合開發(fā)實現(xiàn)多租戶環(huán)境的二次開發(fā)。
7、熟悉redhat,NeoKylin,centos等linux操作系統(tǒng),能進行基本的操作。
8、具有數(shù)據(jù)庫相關認證證書的優(yōu)先。
數(shù)據(jù)倉庫工程師崗位的基本職責 篇13
職責:
1、數(shù)據(jù)庫開發(fā),優(yōu)化和維護;
2、數(shù)據(jù)庫備份和Recover;
3、數(shù)據(jù)庫服務器的管理;
4、數(shù)據(jù)庫安全管理;
5、數(shù)據(jù)庫運維管理標準的制定。
任職要求:
1、本科及以上學歷;3年以上崗位工作經驗;
2、精通Oracle數(shù)據(jù)庫的維護管理;
3、精通Oracle RAC、Dataguard等高可用技術;
4、熟悉Oracle數(shù)據(jù)庫的規(guī)劃、設計和實施;
5、熟悉linux及windows系統(tǒng),有數(shù)據(jù)庫編程能力及掌握數(shù)據(jù)庫維護相關腳本工具;
6、熟悉msqlserver,MySQL。
數(shù)據(jù)倉庫工程師崗位的基本職責 篇14
職責:
1、負責CAIC各類數(shù)據(jù)平臺的搭建及系統(tǒng)開發(fā)實現(xiàn);
2、負責系統(tǒng)技術運維及各類技術問題處理;
3、負責系統(tǒng)間接口數(shù)據(jù)標準規(guī)范制定;
崗位要求:
1、本科以上學歷,軟件工程、計算機、通信等相關理工類專業(yè);
2、有一年以上.NET實際項目開發(fā)經驗;
3、熟練掌握.NET Framework、C#語言,熟練使用Visual 開發(fā)工具;
4、熟練使用Office軟件,數(shù)據(jù)庫產品,精通SQL Server等大型數(shù)據(jù)庫系統(tǒng)開發(fā),熟練使用JS框架,如jQuery/YUI等,并解讀過源碼,熟練多框架加分,精通Ajax技術;
5、有良好的溝通能力、處理解決問題的能力、強烈的責任感和敬業(yè)精神;
6、工作認真負責,且主動性強,抗壓能力強,能快速融入團隊,有較強分析、溝通和協(xié)調能力。
數(shù)據(jù)倉庫工程師崗位的基本職責 篇15
職責:
1、根據(jù)概要需求(客戶及內部需求)編寫詳細需求規(guī)格說明書,包括規(guī)劃業(yè)務流程、繪制原型等。
2、系統(tǒng)規(guī)劃,與產品人員進行前期調研和產品設計工作,編寫調研報告和項目解決方案。
3、參與系統(tǒng)功能驗收工作及用戶手冊、新增產品功能培訓資料的編寫。
4、負責客戶需求調研及需求反饋的分析。
5、配合測試人員編寫測試計劃、測試用例、測試報告的編寫、問題缺陷的發(fā)現(xiàn)及跟蹤、產品用戶手冊編寫等。
6、協(xié)助系統(tǒng)架構師、系統(tǒng)分析師對需求進行理解。
任職資格:
1.有成熟的技能經驗,其中2年以上軟件需求分析經驗,成功參與過大型產品項目的需求分析工作;有1年以上保險及理賠需求分析經驗者優(yōu)先;有開發(fā)經驗者優(yōu)先;
2、具備良好的溝通能力,能快速把握需求的核心要點,能夠與不懂軟件的其他行業(yè)的客戶迅速溝通,獲取用戶的想法、目的,同時對內溝通,讓內部的開發(fā)人員、項目經理理解用戶想要的東西;
3、熟悉需求調研方法,較強的業(yè)務流程及業(yè)務模型分析設計能力;善于控制需求,
4、有較強的文檔編寫能力;熟悉CMM文檔規(guī)范者優(yōu)先;
5、需有較強的團隊協(xié)作精神。有效的溝通技巧,在團隊協(xié)作中具有精煉思維和解決復雜問題的能力,具備良好的學習能力,責任心強,能夠承受較大的工作壓力;
數(shù)據(jù)倉庫工程師崗位的基本職責 篇16
職責:
1、HPE、H3C、華為等服務器硬件安裝和維護;
2、熟悉HPE、EMC、華為等各品牌存儲,能獨立進行LUN映射及存儲故障解決;
3、熟悉服務器常用的RAID、SCSI技術;
4、對WINDOWS、LINUX等操作系統(tǒng)安裝、排錯;
5、協(xié)助業(yè)務部門做產品升級及方案制訂;
任職資格:
1、大專及以上學歷,計算機專業(yè);
2、服務器相關行業(yè)具有三年及以上工作經驗,具有獨立服務器硬件故障判斷能力,對故障進行獨立解決,具有豐富的硬件安裝和維護經驗;
3、熟悉VMWARE、華為、H3C等虛擬化技術及虛擬化軟件操作;
4、具有一定的網絡規(guī)劃及實施能力,具備網絡基本知識,可排查常見的網絡故障;
5、具備數(shù)據(jù)庫維護經驗更佳;
