大數據運維工程師崗位的基本職責描述(精選15篇)
大數據運維工程師崗位的基本職責描述 篇1
職責:
1、負責大數據基礎架構平臺(Hadoop/Spark/MPP DB)的自動部署;
2、負責線上數據平臺的運維,保障服務的穩定性和可用性;
3、參與超大規模數據快速查詢系統的架構設計和開發;
4、研究大數據前沿技術,改進現有系統的服務和運維架構,提升系統的運維效率。
任職要求:
1. 熟悉linux shell及SQL語言
2. 了解Hadoop等分布式技術,數據倉庫技術;
3. 熟悉數據倉庫數據流監控、故障自動化定位及運維;
4. 強烈的責任心與求知欲,愿意學習新技術并能快速應用;
5. 有較強的書面與口頭溝通表達能力,獨立分析、解決問題的能力;
6、做事認真負責,自學能力較強。
大數據運維工程師崗位的基本職責描述 篇2
職責:
1.負責大數據業務集群的運維工作(Hadoop/Hbase/Hive/ Yarn/ Spark/ Storm/ ES等大數據生態圈組件)確保高可用性。
2.負責集群容量規劃、擴容及性能優化;
3.參入建設大規模分布式集群的運維、監控和管理平臺;
4.參與業務架構設計,在設計階段給出可運維性改進建議;
5.深入研究大數據業務相關運維技術,持續優化集群服務架構,探索新的大數據運維技及發展方向。
任職要求:
1.三年及以上大數據運維工作經驗,熟悉hadoop、hbase、hive、Solr、ES等分布式相關技術,熟悉源碼尤佳,至少掌握java/python/shell中的一種語言。
2.了解大數據平臺應用架構,具備常見問題的基本分析和解決能力。
3.熟悉Linux操作系統的配置、管理及優化,能夠獨立排查及解決操作系統層面的問題;
4.熟悉nginx、tomcat等web應用及中間件的使用和配置
5.強烈的責任心和使命感,執行力強,富有團隊合作精神;
6.對大數據方向運維有很高的熱情和興趣,能主動學習了解相關知識;
大數據運維工程師崗位的基本職責描述 篇3
職責:
1、負責維護服務器的運行,包括巡檢、故障排除、數據備份等業務,保證服務器高質量、高效率運行狀態;
2、負責服務器漏洞整改及補丁升級;
3、負責hadoop運維相關工作;
4、負責大數據平臺的日常部署、升級、擴容、遷移;
5、負責高并發,大存儲和實時流的Hadoop/spark大數據平臺規劃,運維,監控和優化工作。
任職資格
1、2年左右服務器運維經驗;
2、對linux基礎運維命令熟悉,shell,python至少精通一種,如會scala語言可優先考慮;
3、熟悉Linux的維護和管理,熟悉bat及Shell腳本開發,能看懂Python/Scala優先;
4、做過大規模hadoop集群優先;
5、大數據項目:包括不限于hadoop、hive、kafka、hbase、spark、Kudu、Impala等大數據生態的平臺搭建,監控,運維,調優、生產環境hadoop集群trouble shooting 、hadoop版本升級管理及優化支持。
大數據運維工程師崗位的基本職責描述 篇4
職責
1、維護基于Linux的系統和相應的組件;
2、維護Hadoop集群,包括hdfs、hive、sqoop、kafka等核心生態系統,確保集群運行平穩;
3、基于實踐,根據業務需求設計和優化Hadoop生態系統;
4、設計和維護Hadoop相關基礎設施的監控;
5、維護技術文件;
6、根據業務需求設計和安裝新的生態系統或技術組件,并制定最終解決方案。
任職資格
1、本科及以上,信息技術或相關專業;
2、2年以上企業Linux系統和Hadoop經驗;
3、Hadoop生態系統的經驗和知識(必須具備:HDFS, Yarn, Hive, HUE;傾向具備:MapReduce、Spark、Kafka、Logstash、Flume);
3、較強的事故分析和故障排除能力,較強的shell腳本編寫能力;
4、了解HA機制者優先;有ITIL知識者優先;
5、有跨國工作經驗者優先;
6、愿意學習新事物,解決問題。
大數據運維工程師崗位的基本職責描述 篇5
職責:
1、負責云平臺等基礎環境規劃及建設,虛擬化等技術實施;
2、負責機房物理設備的日常巡檢,對云平臺及大數據運行環境的日常維護,保證運行環境的安全和穩定,對突發事件進行快速處理和恢復;
3、負責Hadoop集群的部署及日常維護,熟悉Hadoop生態圈組件的配置與調優;
4、負責硬件設備和系統軟件購買采購數的擬定,以及運維相關技術文檔的整理和維護。
任職要求:
1、優先,30歲以下,計算機相關專業,統招本科及以上學歷,3年以上中、大型云平臺服務器運維經驗。
2、具備基本的機房建設及管理能力,能對機房內服務器、交換機、路由器等物理設備巡檢維護數據備份及恢復。
3、熟悉TCP/IP協議,熟練掌握CISCO路由器、防火墻、交換機配置,具備一定的網絡規劃和組網技術能力,負責VLan及子網劃分,提供內外網及VPN連接等網絡接入方式;
4、熟悉KVM/Docker等虛擬化技術,及基于VMWare/OpenStack云平臺的搭建及運維;
5、有豐富的Hadoop生態系統運維經驗,了解Hadoop、STorm、Spark、Kafka、zookeeper這些組件的原理,具備部署、實施、維護hadoop集群及相關組件的能力。
6、熟悉Zabbix、Nagios等開源運維監控系統,熟悉通過LVS/Keepalived/Hearbeat技術實現負載均衡,了解CDN技術。
7、有中大型云平臺數據中心容災建設方案(一城兩中心、兩地三中心)實施經驗者優先;有思科認證(CCNA/CCNP/CCIE)證書者優先。
8、為人正直,有責任感,工作認真細心。
大數據運維工程師崗位的基本職責描述 篇6
職責:
1、負責公司關務、貨代、倉庫等日常系統運維;
2、負責系統異常處理以及與軟件工程師反饋;
3、負責相關操作文檔的編制,輔助、培訓用戶正確安裝、使用計算機及應用軟件;
4、負責公司日常辦公相關軟件以及系統安裝等相關運維。
崗位要求:
1、本科及以上學歷,計算機/數學相關專業;
2、有倉儲物流行業信息化運維工作經驗者優先;
3、具有較強邏輯思維能力,解決能力和較強的問題總結能力;
4、具有吃苦耐勞精神,工作積極熱情,責任感強,良好的團隊合作精神及溝通表達能力。
大數據運維工程師崗位的基本職責描述 篇7
職責:
1、負責公司現有阿里云平臺的管理,包括:ECS\RDS\Redis等 ;
2、負責公司機房服務器的管理,維護;
3、制定和改進系統的監控、備份方案,應急響應,故障排查,確保系統運行穩定;
4、完成上級安排的其他工作。
任職要求:
1、本科以上學歷,一年以上工作經驗;
2、熟悉CentOS和Ubuntu安裝配置優化,熟悉shell腳本 ;
3、熟悉Linux系統常用服務器的部署,如tomcat、redis、nginx、LVS,haproxy ,mysql的安裝、配置、調優,熟悉常用監控軟件;
4、熟悉SVN ,Git;
5、熟悉計算機軟件、硬件及周邊設備的維護,能解決工作中出現的網絡問題及突發情況,懂得相關網絡設備配置規劃;
6、熟悉使用阿里云相關云產品;;
7、工作認真負責,積極主動,善于思考,善于發現并解決問題;
大數據運維工程師崗位的基本職責描述 篇8
職責:
1. 負責系統運維,含Tableau服務器、軟硬件維護、配置維護。
2. 協助公司軟件系統運維,含虛擬機遠程系統運維、共享等運維管理;
3. 負責數據庫日常運維,備份、恢復、擴容、數據遷移及安全管理;
4. 各類故障及事務的應急響應、處理,協調,保證系統7*24H業務連續性。
5. 工具的配置與管理。
6. 處理上級安排的其他任務。
期望:
1.良好的客戶服務意識,較強的邏輯分析能力、排查問題和解決問題的能力和團隊協作精神;
2.了解數據庫運維工作;
3.熟悉 MySQL相關監控、管理工具;
4.熟悉Apache、NginX、Tomcat、MySQL 等常用服務的安裝、配置和維護;
5.有電商行業基礎者優先考慮。
大數據運維工程師崗位的基本職責描述 篇9
職責:
1. 負責客戶寧波慈溪駐廠IT支持;
2. 協助客戶IT團隊,對桌面級日常IT運維服務進行管理;
3. 負責客戶現場網絡及其設備的維護、管理、故障排除等日常工作,確保公司和客戶網絡日常的正常運作
4. 對日常問題進行跟進,并做好記錄,定期提交系統運行報告和工作記錄報告
5. 要有團隊意識,責任心強,獨立解決突發問題的能力。
任職要求:
1.工作認真負責,擁有良好的溝通能力,有較強的客戶服務意識;
2.有上進心,性格開朗;
3.接受應屆生、實習生,歡迎大家投遞我司簡歷
大數據運維工程師崗位的基本職責描述 篇10
職責:
1、 運維平臺開發/搭建/維護,包括CMDB、發布平臺、監控平臺、工具平臺等;
2、 研發自動化運維工具;
3、 研發基礎服務組件,減少重復開發與運維;
4、 服務器的規劃、監控,數據備份,日志分析,故障排除,性能調優等工作;
任職要求:
1、3年以上互聯網運維開發經驗
2、熟悉python語言,Django/Flask等常用的web框架原理,Javascript,并至少熟悉Angularjs、Reactjs、Vue.js、boostrap等框架中的一種。
3、熟悉Nginx、Ansible、git、jenkins、openfalcon、GitLab等工具使用。
4、熟悉docker和常用編排框架 swarm和k8s并有生產系統實踐經驗優先。
5、熟練掌握常用關系型數據庫使用和優化,如MySQL
大數據運維工程師崗位的基本職責描述 篇11
1.負責服務器日常維護管理,保障服務器系統7*24小時持續運作,發生問題能第一時間處理。
2.通過對關鍵指標的監控,提前發現服務器可能存在的問題并進行預防。
2.對線上服務器進行安全管控,包括端口開放管理、漏洞與補丁管理、防火墻管理。
3.負責服務器架構規劃,保證服務器在高負載的情況下,能夠穩定和可靠運行。
4.對網絡攻擊的防御有較豐富經驗,能夠通過對攻擊行為的分析來制定有針對性的防御策略與機房溝通配合進行防御
5.有較好的溝通協調能力,責任心強。
大數據運維工程師崗位的基本職責描述 篇12
職責:
1.負責公司Windows、Linux服務器及應用環境快速部署、調試、遷移、維護、監控;
2.負責分析、優化服務器操作系統,提升系統安全性和應用環境的速度、性能;
3.負責日常服務器的巡檢,負責軟硬件、系統與應用平臺管理,包括狀態監控、升級、故障處理及優化等操作;
4.負責收集和分析系統性能指標,對提高系統可用性提出建議,維護系統穩定運行;
5.負責公司運營過程中客戶故障受理、客戶售后項目修改以及客戶的相關技術支持工作;
6.負責部分公司內部設備、PC的維護工作。
任職要求:
1、三年以上linux系統運維經驗;
2、熟悉linux下常用開源軟件 如nignx、php、mysql、 lvs 、redis等;
3、熟悉服務器和機房運維的監控技術,熟悉各種監控軟件如cacti, zabbix的使用與配置。
4、熟悉Windows操作系統的相關配置以及SQL Server數據庫、SQL語句常用操作。
5、有一定故障判斷分析處理經驗;具備較好的學習能力、問題分析能力,可以獨立調試解決問題。
6、有良好的團隊協作精神,對工作充滿熱情,富有責任心,能承受一定強度的工作壓力。
大數據運維工程師崗位的基本職責描述 篇13
職責:
1、負責公司各生產服務器、測試系統服務器系統部署及日常運維;
2、負責公司虛擬化平臺及云平臺專用網絡,數據庫,云存儲等日常運維工作;
3、使用主流監控軟件,監控生產/測試系統的硬件、系統、網絡、數據庫運行情況,分析并排除相關故障;
4、制定生產、測試系統的運維規范及流程并進行優化,提升工作效率和服務質量;
5、建立和完善大規模分布式集群的運維工具,提升運維效率和質量,協助公司的日常IT事務。
任職要求:
1、 精通TCP/IP、HTTP/https,DNS,VPN等協議,具備較好的網絡知識及運維能力;
2、熟悉LinuxServer的運維,熟悉shell/Python中的至少一種主流腳本語言;
3、精通WindowsServer的運維,擅長分析系統日志,及時發現系統問題并處理;
4、熟練操作VMwarevsphere虛擬化平臺部署,熟悉云平臺,專用網絡及數據庫、存儲部署及日常運維;接觸過常見云計算服務(華為云、阿里云等),有大規模服務器管理經驗者優先
5、熟悉nagios開源監控軟件的安裝部署;、
大數據運維工程師崗位的基本職責描述 篇14
職責:
1、保證業務運營系統的穩定運行與日常維護任務;
2、負責業務運營系統的安裝、調試、備份、存儲、容災系統的規劃設計工作;
3、負責業務運營系統性能調優與安全防護規劃和管理工作。
任職要求:
1、計算機及相關專業大學專科或以上學歷,3年以上大型系統管理、運維經驗;
2、熟悉Linux和Win20xx操作系統的維護、優化及安全加固;
3、精通shell.python或perl至少一種語言;
4、精通基于linux應用程序的管理和配置,如apache、tomcat、resion、jboos、jdk、mysql、sqlserver、orcale、IIS等;
5、熟悉數據備份和恢復相關技術,可以制定方案;
6、具有很強的故障排查和解決問題的能力,能快速分析系統相關的技術瓶頸和解決方法;
7、能夠研究服務架構,發現潛在問題,制定系統調整和優化方案,提高系統的健壯性和效率;
8、良好的溝通能力及商務談判能力,有運維組長經驗者優先;
大數據運維工程師崗位的基本職責描述 篇15
1. 負責MES系統調研、分析、整理、提煉用戶的產品需求,完成需求分析和設計
2. 負責整體MES系統的開發工作,交付客戶高質量的開發成果;
3. 負責MES系統的日常運維管理、用戶技術支持、功能變更需求、系統調優等,保障所負責系統的平穩、高效運行
4. 負責為客戶提供相關的技術培訓。
5. 根據現有業務流程推動MES系統的功能應用和驗證,提出解決方案并協助業務部門予以解決業務問題。
