大數據開發工程師的職責文本

大數據開發工程師的職責文本（精選23篇）

大數據開發工程師的職責文本 篇1

　　職責：

　　1、負責數據中心和大數據處理平臺的搭建

　　2、在線和離線海量數據分析平臺的開發;

　　3、研究大數據前沿技術，提升系統的運維效率;

　　4、參與大數據的采集、存儲、處理，分析等開發

　　5、參與數據挖掘算法的設計、對海量數據進行挖掘分析和發掘數據價值及算法學習及實現

　　【任職要求】：

　　1、計算機或相關專業本科學歷及以上，2年工作經驗以上

　　2、熟悉Java/Scala等至少一門語言，能對分布式常用技術進行合理應用，解決實際架構問題

　　3、熟練使用hadoop，hive，HBase，YARN，kafka，spark，Storm,Flume等大數據開發組件

　　4、熟悉整個大數據的完整處理流程，包括數據的采集、清洗、存儲、分析和可視化及報表開發;

　　5、熟悉分布式系統概念、架構，有大規模分布式系統設計、實現、部署等經驗;

　　6. 具有優秀的學習能力、獨立分析和解決問題能力，良好的團隊合作精神。

　　7. 有BI開發經驗的優化考慮。

大數據開發工程師的職責文本 篇2

　　職責：

　　1、負責完成業務和產品的對接，支持業務需求研發;

　　2、負責完成產品的迭代升級以及底層架構的升級研發;

　　3、完成團隊安排的其他相關日常工作任職要求;

　　4、負責產品的實時業務和離線業務的研發;

　　5、支持開源大數據技術在數據系統中的使用，修復、優化增強大數據技術;

　　崗位要求：

　　1、具有分布式系統架構開發能力，熟練使用storm、spark hbase者優先。

　　2、能夠使用實時計算平臺，進行實時業務數據的研發。

　　3、能夠基于已有平臺進行離線業務的開發。

　　4、有大數據應用產品研發經驗，具有數據決策產品研發經驗者優先。

大數據開發工程師的職責文本 篇3

　　職責：

　　1、負責數據采集、數據存儲、數據查詢、數據計算等基礎平臺的設計和開發工作;

　　2、利用Hadoop、Spark、Flink等技術進行離線和實時數據開發 ;

　　3、負責大數據平臺的規劃升級、平臺維護和優化 ;

　　4、和其他部門或團隊溝通、資源協調并落實工作。

　　任職要求

　　1、本科及以上學歷;

　　2、3年以上大型大數據平臺建設實施經驗 ;

　　3、掌握常用大數據組件hadoop、Hive、spark、Flink、hbase、elasticsearch等原理、使用和調優 ;

　　4、具備較強技術功底，精通Java、Scala、Python等至少一種開發語言，能根據需求給出技術架構 ;

　　5、有數據倉庫、元數據管理和治理的開發經驗優先 ;

　　6、善于溝通，思維活躍、責任感強、工作積極主動，有良好的團隊協作意識。

大數據開發工程師的職責文本 篇4

　　職責：

　　1.結合項目或產品涉及的具體業務場景，對數據進行清洗、計算與加工;

　　2.思路清晰，可快速響應數據處理的需求，評估并給出合理的解決方案，并采用合理的方式處理需求;

　　3.積極主動，能夠與團隊成員進行有效溝通，并完成數據處理結果的核對與對接;

　　4.完成上級交辦的工作或任務。

　　崗位要求

　　1.計算機相關專業大專以上學歷;

　　2.2年以上大數據產品或項目開發經驗，精通Hadoop生態圈，熟練使用Spark，HBase、Hive、Kafka、Redis等;

　　3.精通SQL，熟練使用HSQL實現復雜數據處理邏輯，并具備數據處理調優的能力;

　　4.熟悉Linux開發環境，熟悉Linux的shell命令。

　　5.具有良好的邏輯思維能力和嚴謹的程序開發思想，具備獨立問題排查與處理的能力;

　　6.良好的團隊精神和合作意識，強烈的責任心，對工作有激情，良好的溝通能力，能吃苦耐勞;

　　7.有大數據項目或產品背景者優先;

　　8.有使用Spark SQL進行數據處理，并具有Spark SQL優化經驗者優先。

　　9.有Python或者Shell腳本開發經驗優先

大數據開發工程師的職責文本 篇5

　　職責：

　　1、負責該領域的業務需求討論，完成技術方案及數據開發;

　　2、負責數據倉庫的體系建設及落地實現;

　　3、負責大數據平臺各類環境的部署及運維、并參與架構優化、性能優化等工作;

　　4、負責該領域所屬模塊的代碼開發、調試與維護工作，并進行技術沉淀和文檔輸出。

　　招聘要求：

　　1、計算機、電子通信、自動化等專業，本科及以上學歷;

　　2、五年以上研發經驗，其中二年以上大數據開發的相關工作經驗;

　　3、熟練JAVA開發語言;熟悉微服務及Spring框架;

　　4、熟練熟練Hive、Impala、ES性能調優，關注細節，學習能力強;

　　5、能配合團隊完成該領域的工作，自我管理能力強，能承受工作中的各種壓力，具備很好的團隊意識

　　6、熟練主流大數據平臺產品部署及運維，如CDH、HDP平臺。

　　7、對機器學習和深度學習等方面有一定的了解;

　　8、有汽車制造業及相關行業的大數據開發經驗優先。

大數據開發工程師的職責文本 篇6

　　職責：

　　1、 負責基于Hadoop/Spark平臺架構的開發、設計和布局 ;

　　2、 完成系統框架的設計和核心代碼的編寫;

　　3、 針對海量的用戶行為數據進行統計、分析與挖掘，不斷提高系統運行效率;

　　4、 負責對數據進行分析，為項目組提供大數據技術指導及分析手段支撐;

　　5、 負責大數據平臺的性能監控和持續優化;針對需求提供大數據分析技術解決方案 ;

　　6、 大數據平臺的運維工作，持續完善大數據平臺，保證穩定性、安全性;

　　7、 熟練使用大數據ETL數據抽取工具;

　　8、領導安排的其他工作。

　　任職資格：

　　1、 3年互聯網行業開發經驗，計算機或相關專業本科以上學歷;

　　2、 精通Hadoop大數據平臺架構，具有扎實的Java/Python等開發語言;并可以開發高效可靠的代碼;

　　3、 具有較強的數據分析、數據挖掘的能力;

　　4、 熟悉spark、Hive、storm等計算框架者優先，對分布式存儲和計算原理有較深的理解;

　　5、 嚴密的數學思維、突出的分析和歸納能力、優秀的溝通表達能;

　　6、 個性開朗，對技術鉆研好學、邏輯思維能力強，溝通能力優秀，有團隊合作精神。

大數據開發工程師的職責文本 篇7

　　職責：

　　1、項目的需求分析、系統設計，相關過程文檔編寫;

　　2、項目的計劃制定，進度把控，人員關系的協調溝通;

　　3、項目的編譯、構建、部署，技術疑難問題解決;

　　4、項目的單元測試和集成測試;

　　5、項目的培訓、驗收、總結。

　　任職要求：

　　1、精通Java，有2年以上Java深層次開發經驗(有豐富項目開發經驗者，可以破格錄用)，具備深厚的Java功底;

　　2、精通面向對象軟件結構知識，熟悉設計模式、OOA/D、UML，能熟練使用Rose建模工具完成軟件設計;

　　3、熟悉Struts，Hibernate，Spring等開源框架，有架構設計經驗者優先;

　　4、精通J2EE體系結構，熟悉JBoss, weblogic, Tomcat等應用服務器系統的開發;

　　5、為人誠信，思維嚴謹，工作主動，能承受一定的工作壓力;

　　6、工作勤奮，責任心強，有良好的質量意識，具有良好的溝通能力和團隊合作意識。

　　7、具備PMP或中高級項目管理認證資質優先;

大數據開發工程師的職責文本 篇8

　　職責：

　　1、負責核心業務研發;

　　2、負責重點技術問題的分析與處理;

　　3、深入理解業務需求，分析和發現系統瓶頸，推動系統性能的提高;

　　4、進行詳細設計、代碼開發，配合測試，高質量完成項目;

　　任職要求：

　　1、全日制統招，本科以上學歷, 計算機相關專業;

　　2、2年以上Java開發經驗;非本科以上學歷需4年以上開發經驗;有過中大型項目開發經驗者或者分布式項目經驗者優先考慮。

　　3、熟練掌握Spring、 SpringMvc、Struts2、Hibernate等開發技術;了解JAVA多線程及并發。

　　4、熟悉XML、HTML、Javascript、CSS的使用和應用開發以及 AJAX技術。

　　5、熟練掌握常用數據庫使用，熟悉mysql、Oracle、postgresql等數據庫中的一種或多種。

　　6、熟悉了解中間件(redis、nginx等)。

　　7、精通常見的Java 開發工具idea，熟悉常見的Java Web容器Tomcat等 。

大數據開發工程師的職責文本 篇9

　　職責：

　　1、負責公司項目應用監測數據，分析軟件大數據平臺的代碼開發;

　　2、負責大數據體系架構設計和應用產品的研究;

　　3、負責大數據平臺及應用場景的構建、部署、測試;

　　4、編寫軟件研發相關技術文檔;

　　5、編寫產品研發相關任務單計劃，階段性代碼、技術方案和軟件產品及時提交至配置管理理庫;

　　6、Spark程序的研發，sqoop腳本開發和商家用戶行為等離線分析數據;

　　7、kudu，kylin等技術調研，編寫軟件研發相關技術文檔;

　　8、SUNMI數倉設計架構以及ETL流程開發;

　　9、建立多維度，多體系的用戶標簽體系以及用戶行為數據庫。

　　崗位要求 ：

　　1、本科以上學歷，4年以上?工作經驗，2年以上Hadoop平臺的相關研發經驗，具有良好的需求分析，方案設計，架構設計，程序編寫、測試能力;

　　2、熟悉J2EE或Python平臺開發，有良好的Java或Python語言功底;

　　3、了解Linux/Unix操作系統，了解腳本編程(Shell/Python其中一種);

　　4、具備數據中心資源管理(YARN)、監控(ClouderaManage)、調度(Azkaban)等系統研發經驗者優先，具備分布式系統研發經驗者優先;

　　5、熟悉hadoop以及其?生態圈系統上的hive、hbase、sqoop、spark、spark-streaming等技

　　術，懂hadoop源碼者優先;

　　6、熟悉Kylin有OLAP平臺設計和開發經驗優先;

　　7、具有應用大數據技術處理TB級以上數據的項目開發經驗者優先;

　　8、有較清晰的代碼編寫規范，邏輯性強，工作態度認真，良好溝通能力和團隊合作精神。

大數據開發工程師的職責文本 篇10

　　職責：

　　1、根據開發進度和任務分配，完成相應模塊的開發、編程任務;

　　2、參與維護并不斷發現和改進存在的問題、不斷提升系統性能;

　　3、積極參與產品、功能與技術架構的改進、參與技術規范的實施。

　　任職要求：

　　1.、1-3年以上PHP開發經驗，熱愛軟件開發工作;

　　2、精通PHP語言，熟悉常用主流框架Laravel、thinkphp等;

　　3、熟悉MVC開發模式，深入了解php的性能和安全，能獨立完成模塊設計和開發;

　　4、精通MySQL數據庫，熟悉數據庫設計和性能優化;

　　5、熟練使用linux系統，熟悉nginx等web服務器的配置和優化。

　　6、熟悉并開發過微信公眾平臺的優先

大數據開發工程師的職責文本 篇11

　　職責：

　　1、 適當參與產品設計，與運營部進行有效溝通，保證準確無誤理解對方需求;

　　2、 根據要求完成網站前端以及后臺的功能開發;

　　3、 負責網站的日常維護，改版等。

　　4、有大型旅游平臺后臺開發經驗優先考慮;

　　5、能夠獨立開發功能模塊，比如搶購、優惠券、商家管理、商城訂單等優先考慮。

　　6、負責旅游微信后臺和官網后臺的開發與維護。

　　任職資格：

　　1、4年以上的PHP項目開發經驗，有Java開發經驗優先;

　　2、精通PHP，熟悉MYSQL, 具有大型網站開發經驗優先;

　　3, 熟悉傳輸協議以及加密解密技術，對web安全有認識和經驗;

　　4、能夠熟練使用php,html,CSS,Ajax,Javascript，有一定的跨瀏覽器開發經驗，具備 優化Web應用程序性能經驗;

　　5, 熟悉Linux命令，熟悉主流操作系統和常用工具;

　　6、較強的學習能力和較強的團隊溝通能力;

大數據開發工程師的職責文本 篇12

　　職責：

　　1)根據需求報告進行需求反講、代碼編寫。

　　2)完成系統中業務邏輯相對簡單的功能開發。

　　3)完成客戶功能、數標相關的功能優化。

　　4)完成開發經理安排的其他開發工作任務。

　　具備要求：

　　1)計算機、軟件類等相關專業，本科及以上畢業，1-2年工作經驗。

　　2)有3個以上項目經驗.

　　3)有扎實的java基礎知識，對編程有興趣愛好。

　　4)使用過spring、Mybatis等開源框架;

　　5)熟練使用sql語句的增、刪、改、查。

　　6)熟練掌握eclipse、pl/sql或svn。

　　7)使用過tomcat，熟悉tomcat基本操作。

　　8)有良好的學習、理解能力、溝通能力、邏輯思維能力。能夠虛心學習，上進心強。

　　9)，年齡在28歲以下。

大數據開發工程師的職責文本 篇13

　　職責：

　　1、 負責公司云計算業務相關系統的開發、升級、優化工作。

　　2、 參與相關業務邏輯后臺架構設計、系統建模、數據庫設計、核心代碼的編寫及后臺服務程序的研發和編寫。

　　3、 獨立完成完整功能測試和發布，準備相關的技術文檔，協助解決各種技術問題。

　　4、 進行詳細設計、代碼開發，配合測試，高質量完成項目。

　　5、 按照項目計劃，按時提交高質量代碼，完成開發任務。

　　任職資格：

　　1、 2年以上PHP開發經驗;精通PHP + MySQL，熟悉OOP編程思想和MVC框架，有整體項目開發經驗。

　　2、 熟練使用JavaScript，jQuery熟悉AJAX、JSON數據交互，對Mysql數據庫有豐富的經驗及熟悉優化。

　　3、 熟悉PHP緩存技術、了解高并發、負載均衡處理技術。

　　4、 有移動開發經驗，能完成主流應用工具接口的二次開發，能為業務提供接口支持者優先。

　　5、 有良好的編碼習慣，具有高度的責任心、良好的溝通能力和團隊協作精神。

大數據開發工程師的職責文本 篇14

　　職責：

　　1、負責應用系統、數據庫的運行監控，負責應用版本升級發布等系統環境保障工作;

　　2、負責(或協助)完善系統初始化工作;

　　3、負責數據遷移后的修正工作;

　　4、負責應用系統部分功能開發、驗證測試、輔導答疑、問題處理、歸納分析等工作;

　　5、負責(或協調)應用系統接口調整的聯調測試相關工作;

　　6、負責完成領導交辦的其他工作。

　　任職要求：

　　1、計算機及相關專業方向;

　　2、1年以上工作經驗，能夠勝任簡單的基礎的開發工作;

　　3、了解IT系統技術問題診斷、分析、解決的基本方法;

　　4、具有良好的責任感和團隊合作精神;

　　5、具有良好的協調溝通能力;

　　6、具有良好的歸納總結能力;

　　7、具有良好的抗壓能力;

　　8、有稅務行業工作經驗者優先錄用;

　　9、熟悉ORACLE、Java開發者優先錄用。

大數據開發工程師的職責文本 篇15

　　職責：

　　1、負責局部模塊的任務開發，并按照項目設計和進度要求編碼和單元 ;

　　2、負責按照項目設計的數據庫結構進行編碼和單元;

　　3、根據開發規范與流程獨立完成編碼、及相關文檔;

　　4、對重大的或批量的質量問題進行技術攻關，與團隊其他成員一起及時解決項目開發過程中的關鍵問題和技術難題;

　　5、協助項目經理及質量保證人員保證項目的質量;

　　6、領導交付的其他任務;

　　7、公司內部與上級領導建立良好溝通，按時，按層級匯報工作。

　　任職資格：

　　1、正規高校專科科以上學歷，計算機軟件相關專業優先;

　　2、熟悉java語言，對數據結構有一定的了解;

　　3、熟悉springmvc架構，具備WEB應用開發經驗優先;

　　4、了解JavaScript、jquery,AJAX、HTML、CSS等Web相關技術;

　　5、熟悉xml，json的校驗，處理，解析，轉換;

　　6、深入了解主流WEB開發框架，具備WEB應用性能優化經驗和疑難問題的調試能力;

　　7、對WEB產品設計和用戶體驗有一定的認知;

　　8、具備良好的代碼編程習慣、較強的文檔編寫能力、學習能力和溝通能力;

　　9、執行力強，能夠及時完成領導交代的工作;

　　10、同時能夠與領導建立良好的溝通，具備服從力、執行力。

大數據開發工程師的職責文本 篇16

　　職責

　　1、負責公司產品運營相關網站后端快速響應開發;

　　2、負責公司運營支持相關系統開發;

　　3、負責設計和開發一些內部工具，提高網站整體性開發效益，保證一定的質量;

　　4、負責相關APP接口開發;

　　5、配合移動部門與產品部門實現服務器端相關接口開發。

　　任職資格

　　1、計算機或相關專業，本科以上學歷;

　　2、熟練使用PHP進行程序開發,至少一年以上的PHP項目開發經驗，有模板開發經驗;

　　3、熟悉Linux系統,至少一年以上Linux平臺開發經驗;

　　4、掌握WEB編程相關知識JavaScript,CSS,XML,HTTP協議;

　　5、熟悉大數據量下數據庫(MSSQL、MySQL)的性能管理及優化，具有一定的數據庫規劃能力;

　　6、有大型網站開發經驗者優先;

　　7、較強的責任心及團隊合作精神，有獨立解決問題的能力。

大數據開發工程師的職責文本 篇17

　　職責：

　　對數據庫的規劃、設計、實施，優化數據庫物理建設方案;

　　對數據庫性能分析與調優，支持研發團隊SQL優化和性能審核，保證數據安全和穩定;

　　具有一定系統運維能力，可配合幫助團隊進行系統運營及監控;

　　配合其他部門進行的數據處理、查詢，統計和分析工作。

　　數據庫相關項目管理和實施，及時編寫更新相關的技術文檔;

　　上級安排的其他工作。

　　崗位要求：

　　熟練使用Mysql，MongDb，Postgresql中的一種

　　2年以上關系數據庫使用經驗。

　　具有獨立分析問題和解決問題的能力，良好的溝通能力和團隊合作精神。

　　有Python開發經驗優先

　　有大數據開發背景者優先

大數據開發工程師的職責文本 篇18

　　職責：

　　1、負責公司產品、項目的后端開發工作;

　　2、具備根據不同項目進行進行技術需求調研分析的能力;

　　3、對已有的項目能夠進行優化與改進，具備持續優化的觀念和能力;

　　4、負責產品上線，驗收調試等相關事宜，能夠撰寫符合標準的功能和使用文檔;

　　5、領導交辦的其他工作。

　　崗位要求：

　　1.學歷不限，3年以上PHP開發經驗，對OOP有理解;

　　2. 熟悉至少一種PHP框架并有研究，如yii、laverel、thinkphp，掌握常用設計模式;

　　3. 具有數據庫(含MySQL)索引優化、查詢優化和存儲優化經驗，具備一定的調優技巧;

　　4.具有移動APP、ERP、CMS、CRM、OA、工作流引擎一種或多種開發經驗，熟悉相關業務流程;

　　5.邏輯清楚，思維清晰，代碼規范，溝通良好，具備良好的分析、理解、解決問題的能力;

大數據開發工程師的職責文本 篇19

　　職責：

　　1、負責電商后端核心系統的開發工作和代碼優化

　　2、負責項目或產品的架構設計和系統設計

　　3、核心功能的代碼編寫，并有能力建立和維護代碼質量標準，保證代碼效率

　　4. 分析系統瓶頸和問題，解決各種業務中的問題，對系統性能進行調優

　　5、有一定的管理能力

　　崗位要求

　　1、大學本科3年以上PHP開發工作經驗，熟悉主流框架

　　2、對主流數據庫諸如mysql等，熟悉和熟練。

　　3、有電商、移動電商經驗優先

　　4、有Laravel,tp框架使用經驗優先

　　5、有處理高并發場景處理經驗優先

大數據開發工程師的職責文本 篇20

　　職責：

　　1、 負責公司產品開發，編寫相關開發文檔，完成功能應用的基礎測試。

　　2、 完成所負責開發模塊的詳細設計和文檔編寫。

　　3、 完成所負責開發模塊的代碼維護工作，并對存在的應用做優化。

　　4、 協助完成項目驗收工作。

　　5、 有項目或產品開發經驗的優先考慮。

　　任職要求：

　　1、 計算機相關專業，本科以上學歷。

　　2、 5年以上Java實際項目開發工作經驗，能獨立完成項目開發。

　　3、 熟練掌握Java編程技術，熟悉J2EE架構;熟悉Spring，Hibernate，iBATIS等主流框架;了解Web Service技術及JAVAEE相關領域知識技能。

　　4、 熟悉WEB界面開發，熟悉HTML/XHTML、JavaScript、CSS和AJAX(JQuery)技術;熟悉圖表等插件開發、AmazeUI框架優先考慮。

　　5、 掌握數據庫技術，有數據庫如：MySQL、Oracle等開發的經驗。

　　6、 熟悉Tomcat等Web服務器，了解 Linux、 Unix 系統基本操作。

　　7、 具備良好的軟件編程習慣，能編寫相應的開發文檔，熟悉開發工作相關流程。

　　8、 良好的溝通及團隊協作能力、執行力，具備較好的心理素質。

　　9、 較好適應不同工作環境，快速融入工作團隊。

　　10、有SOA、dubbo、Webx開發經驗優先考慮。

大數據開發工程師的職責文本 篇21

　　職責:

　　1. 負責公司業務生產/支撐的系統類平臺的建設、優化和維護工作;

　　2. 負責公司管理系統的維護性開發工作和自動化運維系統的開發工作;

　　3. 負責搭建和維護監控管理體系，并根據運行情況提出優化建議;

　　4. 負責系統維護過程中相關技術文檔的編寫;

　　5. 負責各應用系統的版本管理，包括部署、升級等;

　　任職資格:

　　1. 計算機、通信技術或相關專業全日制本科及以上學歷，2年以上系統維護或開發經驗

　　2. 熟悉Python語言及Django Web框架，對web前端技術有一定的了解，熟悉 RESTful 服務，深刻理解 MVC架構概念和相關的實現技術

　　3. 熟悉常用的開源監控系統(zabbix 、cacti 、nagios等)，可根據需求自定義監控方案，并可對監控系統做二次性開發

　　4. 精通Linux系統及常見服務的配置、排障、優化

　　5. 對mysql等關系型數據庫有一定的了解，掌握基本的數據庫管理和SQL語句

　　6. 熟悉vmware/xen等虛擬化架構和技術實現

　　7. 能獨立分析問題，善于研究業務分析產品，具備良好的溝通能力、團隊協作能力

大數據開發工程師的職責文本 篇22

　　職責：

　　1.負責ORACLE、SQLSEVER等數據庫的實時數據處理、故障分析出來，性能優化等;

　　2.定位和解決數據集群組件性能和高可用問題，協助數據集群監控系統的開發;

　　3.深入探索業務數據，創造性的思考和發現問題，能夠提出有效解決方案，協助新項目的預研和開發，數據驅動業務，

　　4.負責公司內外部各數據的接入和清洗處理。

　　任職資格：

　　1、計算機相關專業，本科及以上學歷，1年以上hadoop開發經驗，對分布式計算理論有深刻理解。

　　2、熟悉Linux開發環境，熟練Java、scala編程，有良好的編碼習慣;

　　3、熟悉Hadoop、HBase、HIVE、Spark、KAFKA等系統相關技術原理與實現;

　　4、熟悉mysql、sql server、oracle開發環境，對SQL語句相當熟練，具備sql調優能力;

　　5、有大數據運維相關經驗優先

　　6、具備良好的溝通能力、學習能力、分析解決問題能力;

　　7、英語熟練優先

大數據開發工程師的職責文本 篇23

　　1.有較強的需求理解能力；

　　2.遵循編碼規范，及時完成項目管理組分配的開發任務，保證項目開發進度；

　　3.配合測試對所開發項目進行集成測試、缺陷修復等項目品質保證的相關工作；

　　4.對所負責項目進行代碼優化、功能維護、性能維護、需求變更和協助系統部進行系統維護、系統優化以及相關的項目維護工作；

　　5.參與需求分析和功能設計，指導設計、實現及部署工作；

　　6.設計開發核心功能模塊，確保其性能和可靠性。