大數(shù)據(jù)運(yùn)維工程師的崗位職責(zé)（通用12篇）
大數(shù)據(jù)運(yùn)維工程師的崗位職責(zé) 篇1
職責(zé)：
1. 負(fù)責(zé)公司核心集群的運(yùn)維工作,保證其高可用和穩(wěn)定性。
2. 負(fù)責(zé)集群容量規(guī)劃、擴(kuò)容及集群性能優(yōu)化。
3. 深入研究大數(shù)據(jù)業(yè)務(wù)相關(guān)運(yùn)維技術(shù)，持續(xù)優(yōu)化集群服務(wù)架構(gòu)，探索新的Hadoop運(yùn)維技術(shù)及發(fā)展方向。
4. 設(shè)計(jì)實(shí)現(xiàn)分布式集群的運(yùn)維、監(jiān)控和管理平臺(tái)。
職位要求：
1.2年以上中等規(guī)模集群環(huán)境下的Hadoop/Impala/Hive/Spark集群相關(guān)運(yùn)維經(jīng)驗(yàn)。
2.對(duì)各種HDFS/Yarn/Hive/Impala/Spark/Hbase等相關(guān)參數(shù)調(diào)優(yōu), 性能優(yōu)化等有實(shí)際經(jīng)驗(yàn)。
3.有實(shí)際踩坑經(jīng)歷, 對(duì)于相關(guān)組件的版本跟進(jìn), 補(bǔ)丁跟蹤, bug追蹤等有相關(guān)經(jīng)驗(yàn)。
4.實(shí)際處理過(guò)各種集群在線版本升級(jí), 數(shù)據(jù)遷移, 集群擴(kuò)容, 穩(wěn)定性監(jiān)控等工作。
4.熟悉Kerberos安全認(rèn)證系統(tǒng)，實(shí)施過(guò)集群權(quán)限管理, 資源隔離方面的方案規(guī)劃或二次開發(fā)工作。
5.有Cloudera的CM使用經(jīng)驗(yàn)尤佳。
大數(shù)據(jù)運(yùn)維工程師的崗位職責(zé) 篇2
職責(zé)：
1.負(fù)責(zé)公司大數(shù)據(jù)業(yè)務(wù)集群的運(yùn)維工作(Hadoop/Hbase/Hive/Presto/Yarn/Spark/Storm/Kafka/Elasticsearch/Flume等)確保高可用;
2.負(fù)責(zé)大數(shù)據(jù)平臺(tái)的日常部署、升級(jí)、擴(kuò)容、遷移;
3.設(shè)計(jì)實(shí)現(xiàn)大規(guī)模分布式集群的運(yùn)維、監(jiān)控和管理平臺(tái);
4.參與業(yè)務(wù)架構(gòu)設(shè)計(jì)，在設(shè)計(jì)階段給出可運(yùn)維性改進(jìn)建議;
5.深入研究大數(shù)據(jù)業(yè)務(wù)相關(guān)運(yùn)維技術(shù)，持續(xù)優(yōu)化集群服務(wù)架構(gòu)，探索新的大數(shù)據(jù)運(yùn)維技及發(fā)展方向;
6.兼顧應(yīng)用系統(tǒng)的運(yùn)維工作。
任職要求：
1.要求掌握java、shell語(yǔ)言，有Spring Cloud微服務(wù)架構(gòu)開發(fā)經(jīng)驗(yàn)的優(yōu)先;
2.了解Docker，可以做簡(jiǎn)單應(yīng)用;
3.熟悉Hadoop/Hbase/Hive/Storm/Spark/Kafka/Elasticsearch/Flume等開源項(xiàng)目?jī)?yōu)先;
4.熟悉Linux操作系統(tǒng)的配置、管理及優(yōu)化，能夠獨(dú)立排查及解決操作系統(tǒng)層面的問(wèn)題;
5.掌握puppet、kerberos應(yīng)用的優(yōu)先;
6.良好的客戶服務(wù)意識(shí)，強(qiáng)烈的責(zé)任心和使命感，執(zhí)行力強(qiáng)，富有團(tuán)隊(duì)合作精神;
7.對(duì)大數(shù)據(jù)方向運(yùn)維有很高的熱情和興趣，能主動(dòng)學(xué)習(xí)了解相關(guān)知識(shí);
大數(shù)據(jù)運(yùn)維工程師的崗位職責(zé) 篇3
職責(zé)：
1、負(fù)責(zé)公司大數(shù)據(jù)平臺(tái)的部署、管理、優(yōu)化、監(jiān)控報(bào)警，保障平臺(tái)服務(wù)7*24穩(wěn)定可靠高效運(yùn)行;
2、深入理解公司大數(shù)據(jù)平臺(tái)架構(gòu)，發(fā)現(xiàn)并解決性能瓶頸，支撐業(yè)務(wù)和數(shù)據(jù)量的快速增長(zhǎng);
3、開發(fā)大數(shù)據(jù)自動(dòng)化運(yùn)維、監(jiān)控報(bào)警、故障處理相關(guān)腳本和工具;
4、負(fù)責(zé)Hadoop/spark/Mysql等集群服務(wù)、業(yè)務(wù)監(jiān)控、持續(xù)交付、應(yīng)急響應(yīng)、容量規(guī)劃等。
任職要求：
1、3年以上互聯(lián)網(wǎng)運(yùn)維相關(guān)工作經(jīng)驗(yàn)，2年以上大數(shù)據(jù)平臺(tái)運(yùn)維相關(guān)工作經(jīng)驗(yàn);
2、具備一定的故障排查能力，有良好的技術(shù)敏感度和風(fēng)險(xiǎn)識(shí)別能力，精通一門以上腳本語(yǔ)言(shell/python等)，熟悉Http/Https、TCP/IP、SMTP等協(xié)議;
3、熟悉Hadoop大數(shù)據(jù)生態(tài)圈，包括但不限于CDH/HDFS/YARN/Hive/Hbase/Kafka/zookeeper/Spark/Flume/Impala/Hue/Sqoop/Elasticsearch/kibana/MySQL/Oracle等;
4、熟悉Hadoop各組件的原理和實(shí)現(xiàn)，有實(shí)際部署維護(hù)、管理( 包括元數(shù)據(jù)管理)及優(yōu)化經(jīng)驗(yàn)。并擁有持續(xù)調(diào)優(yōu)能力，運(yùn)維管理過(guò)大規(guī)模數(shù)據(jù)平臺(tái);
5、熟悉 Kubernetes(K8s) 集群 Docker 在大數(shù)據(jù)環(huán)境場(chǎng)景的使用;
6、熟悉Linux(redhat/centos)軟硬件環(huán)境、系統(tǒng)管理和優(yōu)化，熟練部署、優(yōu)化各種常用服務(wù)
7、有Java開發(fā)經(jīng)驗(yàn)和閱讀源碼能力者優(yōu)先。
大數(shù)據(jù)運(yùn)維工程師的崗位職責(zé) 篇4
職責(zé)：
1、負(fù)責(zé)公司服務(wù)器日常的維護(hù)，包括巡檢、故障排除、數(shù)據(jù)備份等業(yè)務(wù)，保證服務(wù)器高質(zhì)量、高效率運(yùn)行狀態(tài);
2、負(fù)責(zé)公司大數(shù)據(jù)產(chǎn)品的現(xiàn)場(chǎng)實(shí)施，制定可靠的實(shí)施方案;
3、負(fù)責(zé)公司大數(shù)據(jù)環(huán)境(hadoop生態(tài))集群環(huán)境安裝、維護(hù)、部署、優(yōu)化;
【任職資格】
1、至少2年服務(wù)器、大數(shù)據(jù)集群運(yùn)維經(jīng)驗(yàn);
2、精通linux運(yùn)維命令，熟悉Linux的維護(hù)和管理，熟悉Shell腳本開發(fā)，能看懂Python/Scala優(yōu)先;
3、熟悉大數(shù)據(jù)項(xiàng)目實(shí)施：包括不限于hadoop、hive、kafka、hbase、spark、Kudu、Impala等大數(shù)據(jù)生態(tài)的平臺(tái)搭建，監(jiān)控，運(yùn)維，調(diào)優(yōu)、生產(chǎn)環(huán)境;
4、熟悉docker技術(shù)優(yōu)先;
5、熟練使用git版本控制，jenkins持續(xù)集成工具優(yōu)先;
6、具備強(qiáng)烈的進(jìn)取心、自我學(xué)習(xí)能力,良好的溝通能力和團(tuán)隊(duì)合作意識(shí)。
大數(shù)據(jù)運(yùn)維工程師的崗位職責(zé) 篇5
職責(zé)：
負(fù)責(zé)公司大數(shù)據(jù)業(yè)務(wù)集群的運(yùn)維工作、集群容量規(guī)劃、擴(kuò)容及性能優(yōu)化;
設(shè)計(jì)實(shí)現(xiàn)大規(guī)模分布式集群的運(yùn)維、監(jiān)控和管理平臺(tái);
參與業(yè)務(wù)架構(gòu)設(shè)計(jì)，在設(shè)計(jì)階段給出可運(yùn)維性改進(jìn)建議;
深入研究大數(shù)據(jù)業(yè)務(wù)相關(guān)運(yùn)維技術(shù)，持續(xù)優(yōu)化集群服務(wù)架構(gòu)，探索新的大數(shù)據(jù)運(yùn)維技及發(fā)展方向;
負(fù)責(zé)公司大數(shù)據(jù)平臺(tái)的應(yīng)用監(jiān)控、容量管理，應(yīng)急響應(yīng)等;
領(lǐng)導(dǎo)安排的其他工作。
任職要求：
1、本科及以上學(xué)歷，軟件工程、計(jì)算機(jī)等相關(guān)專業(yè);
2、熟悉計(jì)算機(jī)原理、網(wǎng)絡(luò)原理等知識(shí);至少2年以上運(yùn)維或開發(fā)工作經(jīng)驗(yàn);
3、搭建，管理及調(diào)優(yōu)Hadoop/HBase/Hive/Flink/Spark/Kafka/Elasticsearch/Flume等開源項(xiàng)目?jī)?yōu)先;
4、至少掌握java/python/go中的一種語(yǔ)言;
5、熟悉HBase/Flink/mysql/redis運(yùn)維優(yōu)先;
6、熟悉zabbix/graphit/grafana加分;
7、具有很強(qiáng)的分析和解決問(wèn)題的能力;
8、具有攻克難題的強(qiáng)烈興趣，以及提升技術(shù)能力的意愿;
9、善于主動(dòng)學(xué)習(xí)，責(zé)任心強(qiáng)，能夠承受較大的工作壓力。
大數(shù)據(jù)運(yùn)維工程師的崗位職責(zé) 篇6
1、協(xié)助完成部門的文檔編制工作，能獨(dú)立完成系統(tǒng)的數(shù)據(jù)統(tǒng)計(jì)工作;
2、協(xié)助處理公司、分公司、各園區(qū)等網(wǎng)絡(luò)日常維護(hù)、故障排除等工作，保證網(wǎng)絡(luò)運(yùn)行通暢、穩(wěn)定;
3、協(xié)助處理辦公設(shè)備、網(wǎng)絡(luò)及相關(guān)設(shè)備、電話系統(tǒng)、計(jì)算機(jī)軟硬件的管理維護(hù)、故障診斷與排除，在需要時(shí)可以進(jìn)行基本的維修，負(fù)責(zé)病毒的查殺，維護(hù)網(wǎng)絡(luò)系統(tǒng)安全;
4、負(fù)責(zé)公司會(huì)議、培訓(xùn)、活動(dòng)等支持工作，對(duì)各部門提供IT技術(shù)支持，并積極主動(dòng)配合各部門快速解決相關(guān)問(wèn)題;
5、完成領(lǐng)導(dǎo)交辦的其他事項(xiàng)。
大數(shù)據(jù)運(yùn)維工程師的崗位職責(zé) 篇7
職責(zé)：
1.負(fù)責(zé)IT日常桌面運(yùn)維工作,處理電腦及打印機(jī)、投影儀等辦公設(shè)備各種軟硬件故障,以及軟件系統(tǒng)的安裝配置等;
2.負(fù)責(zé)辦公網(wǎng)絡(luò)(包括有線網(wǎng)絡(luò)、無(wú)線網(wǎng)絡(luò))的維護(hù)與支持;
3.配合進(jìn)行IT資產(chǎn)管理，機(jī)房日常檢查等工作 。
任職要求：
1、大專及以上學(xué)歷，計(jì)算機(jī)相關(guān)專業(yè);
2、具備優(yōu)秀的計(jì)算機(jī)軟、硬件知識(shí)，熟練掌握Windows、Mac及常用辦公軟件的安裝配置和維護(hù)管理;
3、能獨(dú)立分析處理常見的故障;
4、 具備網(wǎng)絡(luò)基礎(chǔ)知識(shí)，熟悉路由交換技術(shù)，并能對(duì)Cisco、華為、H3C等廠商設(shè)備安裝與調(diào)試，了解弱電工程及綜合布線。
大數(shù)據(jù)運(yùn)維工程師的崗位職責(zé) 篇8
1。網(wǎng)絡(luò)推廣、網(wǎng)站SEO優(yōu)化、網(wǎng)絡(luò)營(yíng)銷策劃、網(wǎng)站編輯、網(wǎng)頁(yè)設(shè)計(jì)、php后臺(tái)程序修改、網(wǎng)站流量提升及后期廣告投放獲取收入等。
2、熟悉網(wǎng)絡(luò)聯(lián)盟的廣告投放、效果跟蹤、分析，以及新聞媒體如搜狐、鳳凰網(wǎng)的新聞稿投放，品牌和企業(yè)宣傳，網(wǎng)絡(luò)危機(jī)公關(guān)等。3、 熟悉網(wǎng)店的維護(hù)管理。負(fù)責(zé)產(chǎn)品的上下架，會(huì)員管理，活動(dòng)促銷等。
4、SNS營(yíng)銷：新浪微博和微信公眾號(hào)的營(yíng)銷、加粉、軟文寫作、推廣。
5、網(wǎng)站的軟文、新聞稿，網(wǎng)站的內(nèi)容seo優(yōu)化及維護(hù)更新。
6、擁有豐富的互聯(lián)網(wǎng)工作經(jīng)驗(yàn)，熟悉互聯(lián)網(wǎng)和網(wǎng)站的運(yùn)營(yíng)及盈利模式，以及移動(dòng)互聯(lián)網(wǎng)營(yíng)銷推廣等。
7、網(wǎng)絡(luò)在線咨詢，訪客來(lái)源分析、產(chǎn)品銷售。
8、計(jì)算機(jī)維護(hù)、局域網(wǎng)管理、網(wǎng)絡(luò)信息安全防范、網(wǎng)站和服務(wù)器漏洞修補(bǔ)、數(shù)據(jù)備份與恢復(fù)等。
大數(shù)據(jù)運(yùn)維工程師的崗位職責(zé) 篇9
職責(zé)：
實(shí)現(xiàn)基于服務(wù)，應(yīng)用的自動(dòng)化部署;
建立和完善面向服務(wù)器，應(yīng)用的監(jiān)控和報(bào)警技術(shù)和機(jī)制;
實(shí)現(xiàn)可靠的公司運(yùn)維服務(wù)，保證平臺(tái)7*24小時(shí)的穩(wěn)定運(yùn)行;
針對(duì)公司面向各個(gè)地區(qū)的核心業(yè)務(wù)設(shè)計(jì)并實(shí)現(xiàn)彈性的運(yùn)維保障。
崗位要求
理解運(yùn)維體系結(jié)構(gòu)，精于容量規(guī)劃、架構(gòu)設(shè)計(jì)、性能優(yōu)化;
熟悉服務(wù)管理、單元部署、自動(dòng)擴(kuò)容等運(yùn)維系統(tǒng)建設(shè);
熟悉故障、監(jiān)控、預(yù)案、擴(kuò)容工作原理;
理解Linux、apache,tomcat,nginx系統(tǒng)原理，具備問(wèn)題分析和快速處理能力;
熟悉SHELL,PYTHON,PERL等腳本類編程工具，并有使用提升效率案例;
對(duì)運(yùn)維工作保持自我驅(qū)動(dòng)的熱情，可以響應(yīng)和處理各種線上運(yùn)維問(wèn)題;
具備很強(qiáng)的分析和解決問(wèn)題的能力，擅長(zhǎng)使用工具實(shí)現(xiàn)自動(dòng)化，對(duì)于重復(fù)問(wèn)題“0”容忍;
具備系統(tǒng)化排查問(wèn)題思路，愛(ài)折騰，愛(ài)分享，優(yōu)秀的團(tuán)隊(duì)協(xié)作及溝通能力。
大數(shù)據(jù)運(yùn)維工程師的崗位職責(zé) 篇10
職責(zé)：
1、負(fù)責(zé)服務(wù)器部署，優(yōu)化整個(gè)大規(guī)模應(yīng)用架構(gòu)的設(shè)計(jì)、實(shí)施、后期疑難問(wèn)題解決;
2、熟悉分布式系統(tǒng)運(yùn)維，為大數(shù)據(jù)和云服務(wù)提供可靠的運(yùn)維保障;
3、協(xié)助搭建完善高可用集群環(huán)境，負(fù)責(zé)MySQL、redis、Kakka等集群運(yùn)維，以及負(fù)載均衡系統(tǒng)運(yùn)維;
4、負(fù)責(zé)網(wǎng)絡(luò)、服務(wù)器、交換機(jī)、路由器、防火墻等軟硬件的安裝、配置、調(diào)試維護(hù)和管理;
5、協(xié)助完善自動(dòng)監(jiān)控報(bào)警系統(tǒng)，對(duì)業(yè)務(wù)層面關(guān)鍵指標(biāo)進(jìn)行監(jiān)控與報(bào)警通知;
6、及時(shí)處理服務(wù)器宕機(jī)、病毒感染、黑客入侵等異常突發(fā)事件。
職位要求：
1、3年以上運(yùn)維經(jīng)驗(yàn)，精通Linux操作系統(tǒng)以及服務(wù)器群的網(wǎng)絡(luò)搭建、設(shè)置和維護(hù);
2、熟悉網(wǎng)絡(luò)安全監(jiān)控、系統(tǒng)性能管理和調(diào)試、網(wǎng)絡(luò)性能管理;
3、精通MySQL數(shù)據(jù)庫(kù)管理、監(jiān)控和備份，集群搭建配置等，熟悉MongoDB、Cassandra等一種以上NoSQL數(shù)據(jù)庫(kù);
4、熟悉服務(wù)器、存儲(chǔ)系統(tǒng)、路由器、交換機(jī)、負(fù)載均衡等網(wǎng)絡(luò)設(shè)備的搭建、配置、監(jiān)控維護(hù)，具有網(wǎng)絡(luò)維護(hù)、排障和系統(tǒng)化解決問(wèn)題能力;
5、有自動(dòng)化運(yùn)維平臺(tái)構(gòu)建經(jīng)驗(yàn)，熟悉Ansible、Puppet、Saltstack、Zabbix、Ganglia、Cacti等開源工具的使用，并能夠根據(jù)需求擴(kuò)展;
6、負(fù)責(zé)系統(tǒng)運(yùn)維監(jiān)控體系建設(shè)，有大規(guī)模主機(jī)監(jiān)控經(jīng)驗(yàn)者優(yōu)先;
7、有Hadoop、Spark、Docker等經(jīng)驗(yàn)者優(yōu)先考慮。
大數(shù)據(jù)運(yùn)維工程師的崗位職責(zé) 篇11
職責(zé)：
1、 負(fù)責(zé)公司網(wǎng)絡(luò)運(yùn)維產(chǎn)品的技術(shù)支持服務(wù)，包括售前支持服務(wù)和技術(shù)服務(wù);
2、 協(xié)助銷售經(jīng)理進(jìn)行售前技術(shù)支持服務(wù)，深入挖掘客戶技術(shù)需求，為客戶提供相應(yīng)解決方案，提供產(chǎn)品測(cè)試技術(shù)支持;
3、 負(fù)責(zé)網(wǎng)絡(luò)運(yùn)維產(chǎn)品的解決方案、實(shí)施方案、投標(biāo)書等文檔編寫工作。
4、 協(xié)助市場(chǎng)部的技術(shù)類相關(guān)工作。
任職要求：
1、 大學(xué)本科及以上學(xué)歷，計(jì)算機(jī)相關(guān)專業(yè)(優(yōu)先)。
2、 兩年以上技術(shù)支持經(jīng)驗(yàn)，精通計(jì)算機(jī)網(wǎng)絡(luò)技術(shù)，對(duì)網(wǎng)絡(luò)運(yùn)維管理有一定的認(rèn)知。
3、 熟悉TCP/IP協(xié)議原理，有網(wǎng)絡(luò)管理軟件技術(shù)支持工作經(jīng)驗(yàn)者優(yōu)先。
4、 良好的溝通能力和客戶服務(wù)意識(shí);
5、 優(yōu)秀的文檔組織和編寫能力
大數(shù)據(jù)運(yùn)維工程師的崗位職責(zé) 篇12
職責(zé)：
1.負(fù)責(zé)軟件系統(tǒng)日常維護(hù)工作，確保系統(tǒng)安全運(yùn)行;應(yīng)用環(huán)境的各類服務(wù)軟件的搭建和維護(hù)工作;
2.負(fù)責(zé)參與軟件的培訓(xùn)與實(shí)施上線工作;
3.負(fù)責(zé)系統(tǒng)運(yùn)維，日常軟件故障排除、系統(tǒng)優(yōu)化、安全優(yōu)化、網(wǎng)絡(luò)故障診斷及排除等各類技術(shù)故障處理;
4.負(fù)責(zé)對(duì)客戶在線支持、軟件運(yùn)行過(guò)程中問(wèn)題解答、應(yīng)急現(xiàn)場(chǎng)支持等;
5.對(duì)已有的運(yùn)維項(xiàng)目進(jìn)行維護(hù)、更新及管理;
任職要求：
1.計(jì)算機(jī)相關(guān)專業(yè)，大專及以上學(xué)歷;1-3年相關(guān)經(jīng)驗(yàn)
2.了解計(jì)算機(jī)網(wǎng)絡(luò)、硬件及常用軟件的相關(guān)知識(shí);熟悉數(shù)據(jù)庫(kù)的基礎(chǔ)知識(shí);
3.具備較強(qiáng)的溝通、合作能力;有強(qiáng)烈的責(zé)任心，工作踏實(shí)認(rèn)真、積極主動(dòng);善于思考，學(xué)習(xí)能力強(qiáng)，能夠快速掌握專業(yè)知識(shí);
4.熟練操作oracle或者M(jìn)ysql者優(yōu)先。
5.熟悉一門開發(fā)語(yǔ)言者優(yōu)先，如java等。