大數據運維工程師的工作職責

大數據運維工程師的工作職責（精選21篇）

大數據運維工程師的工作職責 篇1

　　職責：

　　1、負責和參與公司大數據基礎架構平臺規劃，運維，監控和優化工作，保障數據平臺服務的穩定性和可用性;

　　2、研究大數據前沿技術，改進現有系統的服務和運維架構，提升系統可靠性和可運維性;

　　3、負責和參與自動化運維系統及平臺的建設;

　　4、負責優化部門運維流程提升運維效率。

　　任職要求：

　　1、統招本科及以上學歷，計算機相關專業，2年以上互聯網運維工作經驗;

　　2、熟悉Linux操作系統及常見開源軟件(Nginx,Tomcat,Zabbix等)的配置，管理及優化，能夠獨立排查及解決操作系統層的各類問題;

　　3、熟悉Hadoop/Kafka/Hbase/Spark/Elasticsearch/Hive的組件原理及運維方式;

　　4、精通Python,shell,了解JAVA;有良好的系統性能優化及故障排除能力;

　　5、具有很強的責任心、執行力、服務意識、學習能力和抗壓能力;

　　6、具備較好的溝通能力、主動性和團隊合作精神。

大數據運維工程師的工作職責 篇2

　　1.負責公司大數據業務集群的運維工作(Hadoop/Hbase/Hive/Yarn/Spark/impala/kudu等)確保集群環境的穩定可用;

　　2.負責集群容量規劃、擴容及性能優化;

　　3.負責大數據集群性能監控與優化，故障處理，數據備份及容災恢復，集群出現異常時，能快速定位問題，并及時給出解決方案;

　　4.設計實現大規模分布式集群的運維、監控和管理平臺;

　　5.參與/主導業務架構設計，在設計階段給出可運維性改進建議;

　　6.深入研究大數據業務相關運維技術，持續優化集群服務架構，探索新的大數據運維技術及發展方向;

　　7.參與例如服務器維護、項目維護、監控維護等常見運維事務

大數據運維工程師的工作職責 篇3

　　職責：

　　1. 完成大數據平臺日常運維工作(上線/日常監控/問題定位/腳本開發)，涉及HDP/Hadoop/Spark/Tensorflow/Flink/Storm/Presto/Kudu/Alluxio等開源組件;

　　2. 完成大數據自研平臺工具運營，比如報表平臺、調度平臺和性能監控平臺;

　　3. 提升系統可靠性，完善監控策略，優化運維流程，提升部門運維效率，保證7*24服務;

　　4. 參與開源社區建設，提升公司開源影響力;

　　任職條件：

　　1. 熟悉Hadoop工作原理，熟悉Hadoop、Hive、Storm、Presto、Flink、 Alluixo、Kudu等開源組件的搭建、維護以及問題定位;

　　2. 熟悉Linux操作系統，熟練掌握Linux常用命令,了解ansible/puppet;

　　3. 熟練掌握shell/python/java;

　　4. 熟悉hive/spark sql工作原理，熟悉SQL語法，掌握數據庫的維護工作;

　　5. 對自動化運維有一定見解，使用過各種開源工具完成日常運維工作;

　　6. 有大數據平臺維護經驗優先;

　　7. 掌握dockerfile，了解大數據與k8s結合者優先;

　　8. 參與開源社區，有代碼貢獻或者高質量博客文章者優先;

大數據運維工程師的工作職責 篇4

　　職責：

　　1、負責大數據平臺架構的規劃、設計、搭建;

　　2、負責大數據平臺的運維保障工作;

　　3、負責運維相關數據分析，以及報表產出;

　　4、為線上服務高效穩定運行負責，支撐業務和數據量的快速擴張;

　　5、深入理解大數據平臺架構，發現并解決重大故障及性能瓶頸;

　　6、研究跟進大數據架構領域新技術并分享。

　　工作要求：

　　1、熟悉大數據產品生態圈，包括但不限于HDFS、YARN、Hive、HBase、Spark等;

　　2、精通Linux/Unix系統;

　　3、有數據分析經驗優先，精通一門以上腳本語言(shell/perl/python等)，熟悉java/C/C++/Golang等開發語言一種及以上;

　　4、有2年以上大數據平臺相關運維開發經驗，了解分布式平臺運行的原理，并有實際部署維護經驗;

　　5、學習能力和主動性強，具有鉆研精神，充滿激情，樂于接受挑戰;

　　6、良好的服務意識，善于團隊協作，項目管理，主動思考，自我驅動力強。

大數據運維工程師的工作職責 篇5

　　職責：

　　1、負責Hadoop、HBase、Hive、Spark等大數據平臺 規劃、部署、監控、系統優化等，確保高可用;

　　2、負責公司大數據平臺的運維管理工作，集群容量規劃、擴容及性能優化;

　　3、處理公司大數據平臺各類異常和故障，確保系統平臺的穩定運行;

　　4、設計實現大規模分布式集群的運維、監控和管理平臺;

　　5、深入研究大數據業務相關運維技術，持續優化集群服務架構，探索新的大數據運維技及發展方向;

　　6、為數據倉庫、數據挖掘建模等數據應用項目提供運行環境支持。

　　崗位要求：

　　1、掌握Linux操作系統的配置，管理及優化，能夠獨立排查及解決操作系統層的各類問題;

　　2、熟練掌握Python, shell中的至少一門語言，有Python運維工具開發經驗優先;

　　3、熟悉 Hadoop生態及高性能緩存相關的各種工具并有實戰經驗，包括但不限于Hadoop、HBase、Hive、Spark、impala、zookeeper、kafka、Elasticsearch、oozie、yarn、Scribe、Flume、Storm等;

　　4、具有集群運維經驗，以及大負載下的容量評估、問題定位、架構優化等能力優先;有分布式系統(計算/存儲)開發經驗優先;

　　5、熟悉zabbix/ganglia/Prometheus/grafana系統的組合構件及使用;

　　6、精通ELK系統，有過大規模ELK配置管理、調優經驗，有過ElasticSearch搜索和分析引擎開發經驗者優先;

大數據運維工程師的工作職責 篇6

　　1. 負責應用系統的管理與維護。部署、監控、擴容。

　　2. 負責平臺故障的應急處理與跟蹤解決。

　　3. 負責服務器的日常運維。

　　4. 參與運維工作的自動化建設。

大數據運維工程師的工作職責 篇7

　　職責：

　　1、負責公司應用等各種服務的部署、運維、優化等工作;

　　2、負責公司應用產品平臺和項目的運維、優化等工作(操作系統、網絡、存儲、數據備份、日志管理等方面);

　　3、負責公司應用產品平臺和項目，做到7*24快速響應;

　　4、負責處理系統方面日常變更、控制突發情況，對疑難問題進行分析并解決;

　　5、研究制定運維策略、預案和相關解決方案;

　　6、負責公司應用平臺和項目的上線部署;

　　7、負責現網服務器規劃與維護。

　　任職要求：

　　1、本科以上學歷，計算機相關專業，5年以上工作經驗，精通各種常用linux中間件使用及調優，如tomcat，nginx，apache，memcache,varnish等;

　　2、熟悉分布式文件系統，有應用實踐案例，如GlusterFS,Mogilefs,GFS,FastDFS等;

　　3、熟練應用OpenStack，Xen，Kvm，vmware，有私有云搭建經驗優先;

　　4、精通Shell編程，至少熟悉一門以下語言：Perl，python，php;

　　5、熟悉Nosql，如redis，MongoDB;

　　6、熟悉集群、負載均衡，LVS，Haproxy，corosync,keepalive;

　　7、熟練應用各種系統管理工具：ansible，puppet與saltstack;

　　8、具有良好的團隊協作能力和服務意識，有一定的溝通、寫作能力，可以獨立撰寫報告。

大數據運維工程師的工作職責 篇8

　　職責：

　　1.負責機房基礎設施及服務器、交換機的日常維護巡檢，保持機房運行環境的良好狀態;

　　2.對數據中心機房服務器、網絡等設備進行安裝、硬件維護、故障處理等工作;

　　3.負責服務器系統、數據庫安裝與維護管理;

　　4.負責公司網絡平臺的運行監控與維護;

　　5.進行路由器等網絡設備的維護管理，并對網絡優化及辦公室病毒查殺進行合理規劃;

　　6.對公司電腦、及IT周邊設備故障維護;

　　7.負責VPN網絡、VOIP網絡建設和維護，技術檔案維護。

　　8.對泛微OA系統、SAP系統開發與維護

　　任職要求：

　　1.計算機相關專業，大專以上學歷;

　　2.3年以上的網絡管理、服務器管理、機房管理維護工作經驗;

　　3.熟悉服務器系統、數據庫安裝與維護;

　　4.熟悉企業級路由器、交換機、防火墻設備的設置與維護管理;

　　5.精通windows，AD域 、DHCP、DNS搭建與管理，熟悉exchange郵箱服務器的管理

　　6.熟悉應用系統架構，對OA系統、ERP軟件有維護經驗

　　7.注重服務意識，責任心強，性格開朗，工作積極主動，能接受勤奮工作氛圍，有一定的抗壓能力，敢于承擔。

大數據運維工程師的工作職責 篇9

　　職責：

　　1、負責公司云平臺服務器、機房服務器的管理、維護;

　　2、負責對公司相關業務平臺(APP、web 網站、數據庫等)的網絡規劃、服務器規劃;

　　3、負責對公司相關業務平臺運行的安全性和穩定性，對服務器系統漏洞能及時發現和修補;使用腳本對服務器和項目的性能和資源進行監控;

　　4、負責網絡服務器數據備份、安全策略、穩定運行。

　　5、負責相關系統運維文檔的撰寫、整理和更新。

　　崗位要求：

　　1、計算機等相關專業畢業，一年以上網絡系統維護工作;

　　2、熟練掌握騰訊云、阿里云相關產品應用，包含但不限于云服務器、云數據庫、負載均衡、CDN、文件存儲、數據傳輸、服務器安全等應用的配置搭建和操作;

　　3、熟悉常用服務器系統軟件的部署和調優，常用網絡監控軟件的部署和使用，具有良好的網絡安全意識;

　　4、具備良好的溝通協調能力和團隊協作能力，具備良好的職業道德和職業操守。

大數據運維工程師的工作職責 篇10

　　職責：

　　1、負責為用戶提供相關核心業務系統的綜合性運維服務工作;

　　2、負責處理解決系統及相關設備使用過程中所產生的各類技術和業務問題;

　　3、負責對客戶現場緊急事件進行響應支持，按照規定時間到達客戶現場;

　　4、熟悉客戶業務及系統運行情況，定期檢查客戶系統運行情況，提前預防問題的發生;

　　5、完成上級主管分配的任務、及時向上級主管反饋工作進度情況;

　　任職要求：

　　1、計算機或財務相關專業，大專以上學歷，年齡22～35歲;

　　2、具有表達能力和溝通能力，有良好的服務意識;

　　3、具有良好的學習能力，勤于鉆研、團隊意識強、抗壓能力強;

　　4、專業基礎扎實，能與技術開發人員進行技術邏輯方面的溝通;

　　6、會基本SQL語句，能從數據庫中查找簡單問題;

　　7、從事過軟件實施、系統維護者優先考慮;

大數據運維工程師的工作職責 篇11

　　職責：

　　1、負責公司物流平臺項目的實施和維護工作。

　　2、負責現有軟件系統的運行維護及監控，提供IT軟硬件方面的服務和支持，保證系統的穩定，包括但不限于日常巡檢、問題排查、跟蹤和統計;

　　3、負責用戶終端電腦(操作系統、軟件更新、殺毒、木馬查殺等)、打印機的維護;

　　4、負責系統相關外設的資產管理和維護，包括但不限于手持終端、條碼打印機、掃描槍、便攜式打印機等;

　　5、完成領導布置的其他工作。

　　要求：

　　1、 計算機或電子商務相關專業，本科以上學歷;

　　2、 熟悉TMS系統，有一定的編程能力為佳;

　　3、 具有良好的工作責任心和團隊合作精神;

　　4、 語言表達清晰、善于溝通，有較好的文檔編寫能力;

　　5、 二年以上項目實施經驗，有物流行業工作背景優先錄用。

大數據運維工程師的工作職責 篇12

　　職責：

　　1、負責日常桌面維護，負責公司內部服務器的維護，包括公司電話系統，視頻會議系統，安防系統，辦公電腦，打印機、投影儀等周邊設備;

　　2、負責網絡的維護、管理、故障排除等日常工作，負責公司機房設備的日常巡檢，確保網絡日常的正常運作;

　　3、執行公司信息安全策略、日常操作規范和制度;

　　4、維護公司計算機、服務器系統軟件和應用軟件，同時為其他部門提供軟硬件技術支持;

　　5、解決排除各種軟硬件故障，編制匯總故障、問題，定期提交匯總報告;

　　6、數據數據庫的常用操作和維護，并根據要求形成相關統計報告。

　　7、IT運維相關流程的規劃、設計、推行、實施和持續改進。

　　任職資格：

　　1、通信、計算機等相關專業，本科或以上學歷，有相關工作經驗者優先;

　　2、善于維護網絡的安全，可熟練進行網絡設備的基本維護和故障處理;

　　3、英語良好;

　　4、較強的分析能力;

　　5、良好的溝通技巧及團隊合作能力。

大數據運維工程師的工作職責 篇13

　　職責：

　　1. 負責完成數據中心日常運維，巡檢，記錄等工作

　　2. 負責完成數據中心相關硬件日常維護，包括網絡、系統、存儲、數據庫、安全、云平臺等

　　3. 負責完成數據中心溝通及配合業務上線

　　4. 負責完成領導交辦的其他事項

　　任職資格：

　　1. 本科以上學歷

　　2. 一年以上IT運維相關工作經驗

　　3. 熟悉路由器、交換機、防火墻等網絡設備(H3C，華為等)。

　　4. 熟練掌握常見DELL、浪潮等服務器基本操作。

　　5. 熟練運用常見操作系統，如Linux,windows

　　6. 基本了解浪潮等常見存儲

　　7. 基本了解常見安全設備，如IPS、IDS、WAF、Soc等。

　　8. 基本了解常見數據庫，如oracle Mysql

　　9. 熟練使用ppt、excel、word等office軟件

　　10.工作認真負責，踏實穩重。

　　11.良好的理解能力，表達能力

大數據運維工程師的工作職責 篇14

　　職責：

　　1、 負責維護短信管理平臺的系統部署、日志監控、應急響應、平臺升級以及日常的維護等;

　　2、 負責linux服務器的日常維護及文件備份，保護文件安全和權限分配，維護系統的正常運作，Linux應用程序的配置，管理;

　　3、 負責對接落地資源、接入資源;配置客戶數據，為客戶提供技術支持;優化落地線路、資源調度，使客戶質量指標達到。

　　4、 檢測短信通道的運行情況，遠程重啟短信平臺服務器，激活短信通道;

　　5、 用mysql進行各種業務的數據統計分析。

　　任職資格：

　　1、 計算機或相關專業大專以上學歷，1年以上系統運維或相關工作經驗;

　　2、 熟練使用VOS系統、linux、mysql、shell等腳本命令;

　　3、 對公有云產品(阿里云)有一定的經驗和了解;

　　4、 豐富的IT平臺監控、系統運維經驗;

　　5、 熟悉Mysql、oracle數據庫以及redis編程者優先;

　　6、 熟悉Java/Shell/PHP/Python等一種語言者優先;

　　7、 有團隊精神，具有鉆研精神、具有較強的自主學習性;

　　8、 溝通能力強，有強烈的客戶服務意識;

　　9、 具有較強的責任心，能夠在一定壓力下工作，積極主動、認真踏實、獨立解決問題的能力。

大數據運維工程師的工作職責 篇15

　　1、負責OA系統的實施與維護;

　　2、負責各類數據庫系統的運維及數據備份,保障相關業務系統的正常運作;

　　3、對自開發系統的需求收集分析，實施培訓，后期運維等工作;

　　4、對系統優化的內容進行匯總，優化后進行系統培訓，以及發布優化后的操作文檔;

　　5、執行上級領導交代的任務。

大數據運維工程師的工作職責 篇16

　　職責：

　　1、負責公司軟硬件系統的日常維護及管理工作并及時解決相關技術問題，了解監控系統、綜合布線、廣播系統、門禁等;

　　2、負責集團網絡的管理及維護，確保通訊順暢、系統穩定;

　　3、負責局域網絡搭建及維護，對用戶終端提供相應的技術支持;

　　4、總部機房管理，日常服務器維護檢查運維等。

　　任職資格：

　　1、電子信息，計算機等相關專業、可接受應屆生 實習生;

　　2、掌握常用網絡及通訊設備的安裝及配置，具備良好的動手能力和排障能力，較強的學習能力。

　　3、具有較強的溝通協調能力、團隊意識、吃苦精神以及責任心;

　　4、良好的語言表達能力，溝通能力，能夠適應出差安排。

大數據運維工程師的工作職責 篇17

　　職責：

　　1、負責智能機器人后臺服務系統的日常維護，保證用戶正確、有效地使用系統。

　　2、負責對系統的運行狀態進行監控，發現并排查系統出現的故障。

　　3、負責系統的維護工作進行收集、整理和深入分析，發現系統運營中存在的問題和隱患，及時提出系統優化建議。

　　4、負責開發、測試和生產環境版本發布。

　　5、公司日常信息系統的維護。

　　任職資格：

　　1、全日制本科及以上學歷，計算機相關專業。

　　2、二年以上系統維護崗位工作經驗，有互聯網公司IT工作經驗。

　　3、掌握Linux操作系統的常用命令及基本操作、熟悉MongoDB數據庫的常用操作，熟悉數據庫的Sql語句(Sql常用語法)、對J2EE架構有基本的了解，具備JAVA開發經驗者優先。

　　4、理解負載均衡架構等領域技術工作原理及其異常診斷、調優，熟悉nginx，tomcat，keepalive，zookeeper等)。

　　5、做事有條理，對待工作認真負責，溝通能力強，有良好的服務意識

大數據運維工程師的工作職責 篇18

　　職責：

　　1、負責公司大數據集群的構建，任務調度、監控預警，持續完善大數據平臺，保證穩定性、安全性;

　　2、負責集群容量規劃、擴容、集群性能優化及日常巡檢和應急值守，參與大數據基礎環境的架構設計與改進;

　　3、深入研究大數據業務相關運維技術，持續優化集群服務架構，探索新的Hadoop、Spark運維技術及發展方向;

　　4、具備ownership，故障排查能力，有很好的技術敏感度和風險識別能力;

　　5、良好的服務意識，主動思考，自我驅動力。

　　任職資格：

　　1、熟悉RedHat、CentOS、Ubuntu系列Linux系統的配置、管理、內核優化。能夠獨立編寫(Shell/Python)腳本語言，腳本開展日常服務器的運維;

　　2、熟悉hadoop生態圈Hadoop, Kafka, Zookeeper, Hbase, Spark、YARN、Elasticsearch、Storm、Tomcat的安裝、調試和運維經驗; 熟悉分布式日志分析系統ELK及相關技術;

　　3、熟悉軟硬件設備，網絡原理，有豐富的大數據平臺部署，性能優化和運維經驗; 了解運維高容量、大流量、大并發Web系統的業務知識以及解決方案;

　　4、工作認真負責，有較強的學習能力，動手能力和分析解決問題的能力;

　　5、能夠利用各種開源監控工具、運維工具，HA、負載均衡軟件完成工作任務;

　　6、mongodb、mysql等配置、調優和備份。

大數據運維工程師的工作職責 篇19

　　職責：

　　負責運維平臺的開發，推進自動化運維體系建設

　　負責制定運維流程，負責運維技術文檔編寫

　　負責新技術架構測試研究，推動架構和部署優化

　　參與公司私有云建設規劃

　　職位要求：

　　計算機相關專業，3年以上linux系統運維工作經驗

　　熟練使用python，至少熟悉一種web框架flask/django/tornado框架

　　具有持續集成和持續交付經驗，熟悉Jenkins等工具

　　熟悉saltstack,ansible等配置管理工具，并能進行二次封裝開發

　　具有網絡/系統/web安全等方面的理論基礎，具備惡意代碼檢測、入侵檢測，安全漏洞分析能力

　　具有良好的文檔編寫習慣和技術分享意識

　　熟悉容器技術虛擬化技術者優先

大數據運維工程師的工作職責 篇20

　　職責：

　　1、企微云平臺的日常運行管理，處理各種運維事故及事件;

　　2、負責企微云應用的部署;

　　3、負責服務器的規劃、調試優化、日常監控、故障處理、數據備份、日志分析等工作;

　　4、參與運維流程制定，確保任何突發情況都能高效響應;

　　5、整理各類運維文檔，沉淀經驗。

　　工作要求：

　　1、本科及其以上學歷，3年以上互聯網公司Linux運維相關經驗;

　　2、精通zabbix監控系統的搭建和維護，能夠開發自定義腳本;

　　3、熟悉Nginx/Apache/Tomcat等Web應用服務器部署、優化;

　　4、熟悉數據MySQL數據庫集群的部署，監控，優化;

　　5、有Elastic Search、Mongodb、Hbase等部署、監控、優化經驗的優先考慮。

大數據運維工程師的工作職責 篇21

　　職責：

　　1、負責綜合經營管理系統的事件處理、問題解決、知識積累，配合執行變更發布、配置管理、數據維護;參與系統安裝、交接測試等工作;

　　2、負責根據業務部門提出的優化(bug修訂)、變更、改進、完善等新需求，在現有應用系統的基礎上從事分析設計、編程開發、測試交付等工作。

　　任職要求：

　　1、大學本科以上學歷，三年以上工作經驗，至少一年.NET開發經驗;

　　2、精通Asp.net(C#)、JQuery，XML、CSS、AJAX等語言或Web技術，能獨立完成系統bug修訂，系統優化，包含需求變更修改;

　　3、熟悉Windows Service、Web Service/WCF以及多線程編程技術;

　　4、理解.net多層機制， 熟練掌握B/S模式開發;

　　5、熟悉SQL20xx數據庫系統，能使用SQL進行編程，能對數據庫性能進行優化;

　　6、有較強的自學能力，有良好的職業素養;

　　7、熟悉Microsoft Dynamics CRM、Sharepoint20xx開發經驗者優先考慮;

　　8、善于并樂于各式溝通，具備極強的團隊精神和工作熱情。