數據中心工程師崗位職責(精選33篇)
數據中心工程師崗位職責 篇1
崗位職責:
1.負責銜接大數據平臺與前端的數據傳輸;
2.根據客戶需求設計大數據業務平臺架構、配置組件;
3.負責后臺服務的調試與測試,梳理接口文檔、開發文檔與測試文檔。
任職資格:
1.碩士以上,或較為優秀的本科生;后端開發經驗2年以上;
2.有基于b/s架構進行實際業務平臺開發的經驗,有to b軟件開發經驗更佳;
3.通用軟件開發基礎、軟件架構基礎、scrum敏捷開發方法,有大數據基礎更佳;
4.精通java或python語言,有rcp框架經驗更佳;熟練掌握mybatis、springcloud / springboot、node.js等框架,精通sql技術;了解以太網通信協議,熟悉websocket技術。熟練使用git,svn等工具;
5.學習能力強,勇于挑戰,代碼質量意識強,篤信“工程即魔法”。
數據中心工程師崗位職責 篇2
崗位職責:
1、對通信和金融業務數據進行分析和挖掘,滿足研發和運營等部門的業務需求和決策需求;
2、能根據業務特點選擇最合適的數據挖掘算法,并做調優;
3、支持數據分析、挖掘算法平臺的部署和日常運營;
4、撰寫分析類報告。
任職資格:
1、大學本科或本科以上統計學、數學或其他相關專業,對數據結構熟悉;
2、熟練使用python進行數據分析、處理、可視化。熟悉numpy/pandas/matplotlib等常用模塊。熟練使用sql,最好用過hive-sql或spark-sql;
3、對hadoop/spark有一定了解。能夠簡單使用hadoop系列命令;
4、對線性回歸,決策森林,xgboost,評分卡等數據挖掘相關算法有一定了解;
5、做過web接口調試,熟悉json者優先;
6、熟練掌握PPT和EXCEL制作;
7、具備良好的學習、溝通與表達能力,具有較強的團隊合作精神,對工作富有熱情,能承受工作壓力;
8、有運營商或金融類相關數據經驗工作優先考慮;
9、能適應中長期現場出差。
數據中心工程師崗位職責 篇3
崗位職責:
1.按產品功能需求說明,設計相應數據庫業務邏輯及規則,并完成腳本封裝。
2.根據產品適配計劃,進行新適配數據庫的預研。
3.根據業務需求,提供數據庫元數據創建語句。
4.協助產品內容、數據庫知識體系、業務算法模型等研發。
技能要求:
1.熟悉Oracle、SQL Server、MySQL數據庫架構及原理,并有實際運維經驗。
2.熟悉MySQL、PostgreSQL和MongoDB等開源數據庫架構及原理,并有實際運維經驗。
3.熟悉RDS for MySQL、PostgreSQL等云數據庫架構及原理,并有實際運維經驗。
4.熟悉達夢、人大金倉、南大通用、神州通用、高斯、熱璞、巨杉等國產數據庫架構及原理,并有實際運維經驗。
5.熟悉PolarDB、OceanBase、Tidb等數據庫架構及原理,并有實際運維經驗。
6.深刻理解數據庫原理及架構,有二線dba經驗者優先。
7.熟悉Unix、Linux、Windows等操作系統架構及原理,并能熟練使用。
8.熟悉主流自動化運維、監控產品,有實際開發及使用經驗的優先。
9.熟練使用shells、Python等腳本語言。
10.熟悉腳本開發規范,具有數據庫開發背景的`優先。
11.深入理解數據庫的數據字典,并熟悉對象定義,有自定義對象開發經驗的優先。
12.善于溝通,皮實,良好的學習能力。
13.本科(含)以上學歷,計算機或相關專業的優先。
數據中心工程師崗位職責 篇4
崗位職責:
1、負責構建公司數據分析與數據挖掘業務分析體系,整體架構設計、規劃,充分發揮數據的價值,提高數據質量,促進公司業務更好的發展;
2、通過建立業務的數據分析模型來指導業務的發展,對數據庫信息進行深度挖掘和有效利用,充分實現數據的商業價值,構建公司核心競爭力;
3、跟蹤并分析用戶行為,為公司廣告業務的發展及產品的設計進行海量數據支持;
4、負責數據管理中心團隊的建設、發展、激勵、培訓等管理工作,有效領導數據分析與挖掘團隊支持和推動業務發展。
任職要求:
1、熱愛數據,對數據及邏輯關系敏感,并對數據體系有深入的認識;
2、本科以上學歷、計算機/統計學/經濟學等相關專業,有一定工作經驗,;
3、具備數據建模(機器學習,數據挖掘,信息檢索背景)和分析理論知識和經驗;
4、熟悉Linux平臺的海量數據分布式存儲、分布式計算;
5、熟悉常用的數據分析工具,有基于Hadoop的云計算平臺,HBase及類似的NoSQL存儲, MySQL,和BI系統等實踐經驗;
6、熟悉互聯網并且對于互聯網常見的業務形態與商業模式有深入的理解,對業務變化有敏銳的洞察力;
7、有較強的對業務理解與分析能力,了解業務規劃與策劃能力以及相應經驗;
8、具備較強的問題定位、分解、解決能力及計劃和組織能力;
9、善于創新、思維敏捷、精力充沛,溝通能力強,能夠承受較大工作壓力;
10、有電子商務或互聯網數據倉庫或商業智能架構設計、開發實施經驗者優先。
數據中心工程師崗位職責 篇5
1、負責生產環境Mysql數據庫系統高可用、高性能架構方案,分庫分表策略,數據庫擴展方案;
2、排查數據庫故障,分析和解決疑難問題,提出預防方案;
3、制定數據庫監控策略、備份策略、容災策略,探查系統潛在的問題和可能的性能瓶頸并進行優化;
4、對開發工程師的SQL語句進行審核及SQL優化;
5、負責redis、memcache等非關系數據庫的管理和擴展,能夠根據業務需求完成系統設計、架構設計工作;
6、參與前瞻性新技術研究,解決數據庫相關疑難問題。
數據中心工程師崗位職責 篇6
1、負責數據倉庫的設計、開發、部署、維護和優化;
2、參與公司項目數據庫架構設計,及相關文檔的撰寫;
3、協助開發完成數據庫表的設計以及SQL調優,給開發人員提供SQL調優指導;
4、負責數據庫技術規范建設。
數據中心工程師崗位職責 篇7
1、負責應用平臺維護,保證其有效運行;
2、負責業務數據的挖掘、整合以及分析模型的建立、優化和評估;為業務人員日常工作提供可靠而明確的數據支撐;
3、負責報表相關功能的設計、開發工作,并負責報表優化、維護、數據采集;
4、負責系統相關文檔的制定和編寫。
5、有實際的MY SQL或Oracle等數據庫開發相關工作經歷,具有高級工程師技術能力;
6、有良好的溝通協調能力,能與客戶及項目組同事有效的溝通;
7、能夠獨立分析客戶需求,并能針對客戶需求編寫需求分析、設計等技術方案;
8、熱愛軟件事業,具有較強的責任感,有快速掌握新技術和獨立解決技術問題的能力;
數據中心工程師崗位職責 篇8
1、MySQL數據庫規劃、設計、監控維護、升級、備份、鏡像、容災;
2、數據庫服務器的安裝部署、性能優化、可靠性、容災方案制定等;
3、對數據庫性能分析與調優,排錯,保證數據安全;
4、負責對開發工程師的SQL語句進行優化;
5、配合研發制定數據庫技術方案,分庫分表策略,現有表結構優化,數據遷移方案;
6、負責Mysql自動化相關事宜;
數據中心工程師崗位職責 篇9
1.負責數據分析,數據挖掘相關的算法、應用的設計與開發;
2.負責公司產品各階段數據的整理、分析、挖掘及提交數據報告,重點對車輛行為數據進行分析和挖掘,利用數據分析結論推動業務產品的優化;
3.對海量業務數據進行整合、分析挖掘,挖掘產品以及用戶潛在信息,為營銷、運營及決策提供業務分析及數據支持。
數據中心工程師崗位職責 篇10
1、負責大數據平臺搭建及數據倉庫建模;
2、負責數據庫管理及數據優化;
3、利用大數據相關技術實現對數據的分析、挖掘、處理、及數據可視化等相關工作;
4、維護大數據平臺并能解決相關問題,保障平臺正常運行;
5、學習和研究新技術以滿足系統需求。
數據中心工程師崗位職責 篇11
1.負責直播業務相關數據倉庫的數據模型設計;
3.參與數據倉庫ETL流程設計、開發和優化,解決ETL過程相關技術問題;
3.參與項目規劃,數據采集設計,數據倉庫開發,模型開發,報表開發等;
4. 總結數據倉庫建模的方法,負責數據產品平臺化和系統化;
數據中心工程師崗位職責 篇12
1.根據項目經理或高級數據挖掘工程師要求獨立完成項目的數據搜集和數據處理;
2.能夠快速根據項目需要學習并理解行業知識,并能在項目經理或高級數據挖掘工程指導下完成部分數據分析工作;
3.能夠使用SAS,SPSS,或R,Python等開源平臺根據用戶需求定制開發相應的算法;
4.理解數據挖掘模型及預測分析結果,撰寫相關分析報告;
5.了解數據倉庫及商務智能背景,熟練掌握一類數據展現分析工具,如:Tableau,Cognos等;
數據中心工程師崗位職責 篇13
崗位職責:
1.從事數學建模及數據挖掘應用方法研究;
2.與開發部門配合實現相應的數據分析模塊的開發;
3.制定公司數據可管理體系,建產研究用數據平臺。
任職要求:
1.應用數學、統計學、計算機等專業碩士以上學歷;
2.具備常用機器學習、數據挖掘相關知識,會spark;
3.具備一種或多種開發語言(如scalapython java等)的.程序和算法開發能力,掌握常用數據結構和算法;
4.有視頻、地圖、文本、社交等大數據分析能力;
5.有工業數據分析工作經驗者優先。
數據中心工程師崗位職責 篇14
1、負責數據倉庫(HADOOP)ETL工作以及數據運營;
2、負責數據產品的業務需求梳理、數據開發以及維護;
3、負責數據倉庫的'維度建模以及設計相關的腳本調度;
4、負責維度模型的數據處理的腳本開發,程序開發以及接口對接。
數據中心工程師崗位職責 篇15
數據處理工程師(大數據項目)全成通信上海全成通信技術有限公司,全成通信,全成崗位職責:
1、負責大數據平臺的日常維護和監控
2、負責大數據項目日報發布工作
3、負責日報數據的統計
4、負責大數據項目日常數據的計算、分析和維護
任職要求:
1、一年以上相關工作經驗,有電信行業經驗者優先
2、熟悉linux和excel,熟練使用perl或者其他的'腳本語言
3、具有oracledll/dml技術的使用經驗
4、具有良好的團隊合作精神,有較強的學習能力、適應能力、溝通能力
數據中心工程師崗位職責 篇16
數據處理工程師崗位職責
數據處理工程師1)直接面對客戶,參與項目運作中數據處理,了解客戶軟硬件要求;
2)參與、協助數據收集和模型建構;
3)安裝、調試公司軟件在客戶端上線;
4)開發常用數據處理功能,幫助業務團隊提高工作效率;
5)與香港、新加坡和紐約團隊合作,為亞太地區技術服務提供支持。·計算機或軟件相關專業,本科及以上學歷;
·掌握兩門以及常見數據庫設計開發技術,mysql、oracle、sqlserver、hive等;
·具有參加過etl開發項目,處理過(大)數據經驗優先;
·工作細心、認真負責且善于溝通,能快速理解業務,對數據敏感,并能主導項目的進度,保證團隊產出。1)直接面對客戶,參與項目運作中數據處理,了解客戶軟硬件要求;
2)參與、協助數據收集和模型建構;
3)安裝、調試公司軟件在客戶端上線;
4)開發常用數據處理功能,幫助業務團隊提高工作效率;
5)與香港、新加坡和紐約團隊合作,為亞太地區技術服務提供支持。
數據中心工程師崗位職責 篇17
崗位職責:
1.參與金融大數據平臺系統和算法的研發和優化;
2.基于大數據金融場景,進行信用風險模型,風控模型,營銷模型的創新設計;
3.與業務部門溝通合作,將數據模型應用于實際業務。
任職要求:
1.計算機相關專業碩士及以上學歷,至少7年以上相關工作經驗;;
2.具有良好的商業敏感度和優秀的數據分析技能,能夠開發創新而實際的.分析方法以解決復雜的商業問題。
3.熟悉機器學習的一般模型;例如分類.聚類.預測,理解一些常用的特征選擇和矩陣分解算法。
4.熟悉深度神經網絡和常用模型(如CNN,DBN,sparseconding,RNN等),有Caffe或Theano或ConvNet的實踐經驗。
5.在語義理解檢索(如知識圖譜表示.結構化預測.語義解析.信息檢索.知識挖掘等)有過深入的工作與研究。
6.較強的自學能力.優秀的邏輯思維能力和良好的溝通表達能力和敬業精神。
7.具備良好的系統分析能力,良好的抽象思維和邏輯思維能力,獨立分析問題解決問題的能力;
8.可承受較大壓力,有責任感,較強的溝通協調能力,具有團隊合作精神;
9.有互聯網公司.大型金融企業和大型IT企業工作經歷的優先。
數據中心工程師崗位職責 篇18
1.嵌入式bootloader,kernel開發;
2.工業通訊協議解析等;
3.windows/linux平臺網關應用層程序開發;
4.網關產品的軟件功能測試驗證;
5.工業網關產品軟件sdk及library開發。
數據中心工程師崗位職責 篇19
1.負責工業設備組網及數據采集方案設計;
2.負責設計方案所需傳感器、儀表選型,布線圖、數據存儲方式、數據表等詳細設計;
3.負責與設備廠商、數控系統廠商進行業務協議、通信協議及接口協調;
4.負責現場數據采集相關軟硬件安裝調試;
5.負責和用戶現場對口協調、技術指導及現場培訓。
數據中心工程師崗位職責 篇20
1、進行GIS數據建庫和數據處理方案的設計和實現;
2、運用相關GIS軟件進行數據空間化處理建庫;
3、進行影像識別及處理;
4、進行數據采集處理建庫項目管理。
數據中心工程師崗位職責 篇21
1、利用數據倉庫建模及相關技術,參與數據倉庫模型的設計。
2、參與企業級大數據倉庫項目的落地開發。
3、參與企業級主數據管理項目的實施落地。
4、利用hadoop生態相關技術,負責大數據中心的'數據處理流程,包括數據清洗、融合、統計、挖掘等。
數據中心工程師崗位職責 篇22
1. 參加團隊會議與討論,并給予有意義的建議;
2. 協助后端團隊和架構師完成數據庫相關的設計與開發;
3. 協助業務部門抓取、分析數據。
數據中心工程師崗位職責 篇23
1.數據庫軟件安裝、系統搭建、測試環境同步數據等;
2.數據庫日常檢查及維護,并形成文檔登記歸檔;
3.數據庫故障排除與應急處理;
4.數據庫性能分析及優化;
5.為各應用部門提供技術支持。
數據中心工程師崗位職責 篇24
1、針對具體的業務場景需求、定義數據分析及挖掘問題;
2、使用統計學分析方法、挖掘算法、構建有效且通用的數據分析模型,對數據挖掘方案進行驗證、開發、改進和優化,實現數據挖掘的功能應用;
3、搭建高擴展高性能的數據分析模型庫,作為數據分析團隊的基礎工具;
4、完成領導安排的其他工作。
數據中心工程師崗位職責 篇25
1.負責linux平臺下應用軟件開發,根據產品與項目要求,開展模塊設計.編碼等工作;
2.負責linux軟件的交叉編譯與移植;
3.參與需求分析.軟件設計.開發.調試以及測試維護全過程;
4.負責協同硬件工程師或第三方方案商完成系統功能模塊的聯調及功能對接.接口文文件輸出;
5.負責嵌入式系統軟件平臺搭建工作;
數據中心工程師崗位職責 篇26
(1)分析需求,完成相關數據抽取、數據清洗、數據探索、數據建模分析等工作;
(2)按要求完成數據分析報告、建模報告、數據報表等;
(3)對數據進行深度挖掘和建模,做運營和用戶等各方面分析,深度挖掘運營優化和用戶行為特征等,推動分析問題的解決,為業務決策提供日常支持;
(4)與業務部門和技術部門對接,完成設計,編寫,維護和完善公司業務相關的.算法。
(5)參與項目成果匯編,對相關結果進行解讀和匯報。
任職要求:
(1)大專以上學歷,統計、數學、計算機、軟件專業優先;
(2)熟練使用Python,Mysql語言,具有一定的工程能力,完善的文檔和注釋習慣。熟悉JupyterLab遠程代碼編寫環境,Linux常用命令。會使用R,Java,Scala等語言更佳。
(3)熟悉數據分析過程,能夠完成數據抽取、數據處理、數據建模、數據分析報告等任務;
(4)一定的數據挖掘/機器學習理論和技術基礎,了解常用的數據挖掘算法如:聚類模型、線性回歸、邏輯回歸、分類模型、決策樹模型等。
數據中心工程師崗位職責 篇27
相關文件的定義和編寫
2.生產良率和拋料率的監控和改善
3.生產異常的分析解決
4.技術人員的班別安排
5.設備保養的'安排和作業follow
6.設備故障維修&coordinator
7.配合新產品導入或者其他需求的試產驗證
8.主管交付的其他事項
數據中心工程師崗位職責 篇28
1、負責每日的數據倉庫運維工作,保障數據的穩定性、一致性等;
2、參與數據倉庫的優化設計,如元數據、數據權限、調度優化;
3、負責數據質量和數據標準化的設計與開發;
4、負責滿足業務部門的日常業務提數與報表需求的開發。
數據中心工程師崗位職責 篇29
1、維護數據庫穩定運行,持續發現和解決潛在的問題;
2、負責數據庫的性能優化,使用新技術和新架構滿足日益增長的業務需求;
3、負責數據庫的監控系統設計,為開發團隊提供平臺支持;
4、負責數據庫的運維方面的相關工作,包括數據庫的安裝部署、壓力測試、備份恢復、知識庫管理等
5、負責數據庫進行容量規劃、架構設計,提高業務高可用性和容災能力;
6、負責數據庫相關工作的整體規劃,提供決策建議。
數據中心工程師崗位職責 篇30
1.負責企業級數據倉庫設計、規劃、建設、實施、管理,數據倉庫架構設計與數據開發,創建數據倉庫、數據集市
2.熟悉數據倉庫領域知識,從架構和技術層面參與建設數據倉庫,包括元數據管理、數據質量、主數據管理、性能優化和調優。
3.負責數據倉庫平臺相關數據管理工作,如研發規范、質量規范、保障規范的制定與推動實施落地
4.配合和協助數據分析/數據挖掘形成底層/中間層的業務邏輯切片
數據中心工程師崗位職責 篇31
1、負責公司與阿里巴巴在新行業方向(新金融、新零售、國內外運營商)的產品研發;
2、負責分析挖掘客戶/行業對大數據產品的需求(應用場景),利用數據分析結論提升客戶業務能力。例如:文本挖掘,潛在客戶挖掘,用戶畫像,個性化推薦,用能預測等;
3、進行大數據場景下的數據統計、數據挖掘、機器學習、深度學習,包括數據整理、模型建立、模型應用、評估優化等;
4、將客戶需求準確轉化為可執行的數學模型,針對不同的應用場景,負責編寫數據挖掘算法及對其的優化;
5、基于需求分析/運營支持/商業報告等成果,抽取典型用戶/客戶/行業/產品分析模型并與開發團隊溝通實施方案及構建產品原型。
崗位要求:
1、本科以上學歷,扎實的`機器學習、數據挖掘、統計學理論基礎;有統計、應用數學、金融等相關專業背景優先;
2、精通常見機器學習算法(如邏輯回歸、SVM、神經網絡、決策樹、貝葉斯等),有實際建模經驗,掌握深度學習算法優先;
3、具有扎實的計算機操作系統、數據結構等編程基礎,精通至少一門編程語言例如JAVA/python/R等;
4、熟悉Map-Reduce模型,對Hadoop、Spark、Storm等大規模數據存儲與運算平臺有實踐經驗優先。
數據中心工程師崗位職責 篇32
崗位職責:
深入研究業內領先的技術思路,輸出具有創新價值的預研項目可行性分析報告以及相關實驗數據;
負責產品、銷售、供應鏈、電商等公司數據的海量挖掘,并建立和優化用戶標簽、特征模型、產品精準匹配、異常預警等;
負責大數據下傳統機器學習算法的并行化實現及應用,并提出改進方法和思路;
參與公司大數據架構,負責BI實施中的數據挖掘模塊算法研究、模型建立和優化,幫助實現數據挖掘和分析平臺的建設;
負責相關數據挖掘項目的需求收集、項目建立、項目設計開發和結果輸出質量把控,通過數據挖掘結果驅動業務執行;
配合技術進行數據挖掘模型開發和模型封裝,例如決策規則模型、預警模型、流失模型、效果標桿模型、客戶生命周期管理模型等;
任職要求:
大學本科及以上學歷,統計學、計算機、信息技術、數學相關專業;
兩年以上數據建模經驗;
數據主流數據庫,mysql、oracle、DB2等傳統結構化數據倉庫,熟悉HBase、MongoDB等非結構化數據庫;
熟悉常用的聚類、分類、回歸、關聯、時間序列等監督式和非監督式學習算法;
熟悉R、Python、MLlib等數據挖掘工具中至少一種。
熟悉spark、storm等大數據計算框架者優先。
數據中心工程師崗位職責 篇33
1.負責海量數據的分析開發工作;
2.完成數據挖掘模型,跟蹤模型的實施和效果,定期優化算法和分析策略,分析研究后提供建設性建議 ;
3.優化大數據存儲、計算等各方面性能,確保能從海量大數據信息里,有效進行數據分析和挖掘;
4.根據用戶的活動記錄進行特征篩選和關聯挖掘。提高關聯準確性;
5.參與相關數據標準和規范的制定。
要求:
1.熟悉java/scala/python/R中至少一種編程語言,具有良好的.編碼習慣;
2.計算機、數學相關專業本科以上學歷;
3.2年以上數據挖掘及其相關經驗,對常用的數據挖掘算法有較深入了解,有實際算法調優經驗 ;
4.熟悉常用數據挖掘算法(聚類/分類/回歸/關聯規則/圖模型)等算法原理,具備實際的建模經驗,熟悉常用機器學習算法原理,如樸素貝葉斯/決策樹/隨機森林/邏輯回歸/SVM等,并具備相關應用經驗;
5.熟悉hadoop生態,具有spark/flink等實際開發經驗;
6.極強的數據敏感度,能從海量數據中挖掘出數據核心價值,相關;
7.熟悉分布式存儲,熟悉mysql/oracle、hbase、redis、mogongdb、elasticsearch等,熟悉neo4j/JanusGraph等圖數據庫優先 ;
8.富有創新精神,充滿激情,樂于接受挑戰,良好的溝通技巧和團隊合作,抗壓性強,能適應加班。
