大數據開發工程師的崗位職責

大數據開發工程師的崗位職責（通用19篇）

大數據開發工程師的崗位職責 篇1

　　職責

　　1、負責基于hadoop/spark生態系統、億級別數據的全文檢索，搜索引擎的產品研發;

　　2、基于海量用戶行為數據和其他數據，分析和研究數據與實際業務的關聯關系，并與實際業務應用相結合開發;

　　3、負責大數據分析需求設計和開發，承擔數據抽取、清洗、轉化等數據處理程序開發。

　　任職要求：

　　1、熟悉Hadoop/HBase/Spark/Storm/Redis/Kafka/ES/Flume技術及其生態圈，具備相關項目開發經驗，有數據實時計算項目經驗優先;

　　2、有搜索引擎全文檢索開發經驗 ，如：elasticsearch、solr;

　　3、熟悉python、R任意一門開發語言;

　　4、有SAAS，PAAS企業級應用平臺或者互聯網，金融等大型應用平臺開發經驗優先考慮;

　　5、 本科及以上學歷，計算機/軟件工程/統計學/數學等相關專業，互聯網/金融等行業3年以上工作經驗;

　　6、擁有良好的代碼習慣，要求結構清晰、命名規范、邏輯性強、代碼冗余率低，代碼注釋清晰;

　　7、熟悉使用svn，禪道等項目管理工具，有良好的團隊協作開發經驗.

大數據開發工程師的崗位職責 篇2

　　職責：

　　1、依據客戶需求完成大數據項目的數據分析及建模;

　　2、進行大數據核心算法的編寫;

　　3、參與項目的需求分析、系統設計、編碼工作;

　　4、參與開發過程中相關新技術的研究和驗證。

　　5.協助承擔架構性的體系設計和改造工作，配合制定技術實施方案，按照總體設計組織子系統的設計和開發。

　　任職要求：

　　1、精通數據建模、數據體系建設，具備數據倉庫架構設計、模型設計和處理性能調優等相關經驗;

　　2、具有豐富的基于hadoop體系的數據平臺、數據倉庫建設經驗，精通基于hadoop源碼的開發、優化改造及成功應用案例;

　　3、精通hadoop生態體系各項技術，如kafka、flume、hive、impala、hbase、spark等，具有100+節點hadoop集群的開發、運維經驗;

　　4、具有對大型hadoop集群的硬件規劃能力;

大數據開發工程師的崗位職責 篇3

　　職責：

　　1、負責數據分析、加工、清理，相關處理腳本和程序的開發;

　　2、負責開發大數據工具，如報表平臺、多維度分析工具、ETL平臺、調度平臺的研發;

　　3、負責分布式大數據平臺應用開發(Hadoop/Spark/Hive/HBase等);

　　4、負責大數據相關平臺的維護、優化。

　　任職要求：

　　1、本科及以上學歷，計算機相關專業，具有5年及以上的大數據ETL或數據開發經驗，熟悉大數據組件的維護以及調優;

　　2、熟練掌握Java或Python編程語言，熟悉大數據架構體系，熟悉Hadoop、HDFS、Hive、HBase、Spark、Kafka等技術中的一個或者多個，熟悉Sqoop、DataX等數據導入工具;

　　3、能熟練使用Hive、HBase、Spark等加工和處理數據，有海量數據處理經驗;

　　4、有數據倉庫開發經驗/BI系統開發經驗優先;

　　5、有電商行業數據處理與分析平臺開發經驗者優先。

大數據開發工程師的崗位職責 篇4

　　職責：

　　1、從事Hadoop、Spark、Hbase、hive等分布式大數據產品的設計和開發;

　　2、針對部門大數據業務進行大數據分析、挖掘等產品應用的開發;

　　3、大數據平臺各類數據業務抽象及模型化;

　　4、參與大數據管理平臺的開發及維護;

　　5、負責大數據平臺數據及相關的應用開發，調優及維護;

　　6、為項目相關開發人員提供大數據技術指導及解決大數據平臺應用中遇到的技術難題;

　　7、良好的團隊合作與溝通能力。

　　任職要求：

　　1、本科及以上學歷，2年以上大數據應用開發經驗;

　　2、具備Java、Python、Scala其中兩種語言的開發經驗;

　　3、了解泛Hadoop大數據生態圈，熟悉HDFS/Hive/Flink/Hbase/Spark/Kafka其中兩種以上技術，并有實際的項目開發經驗，有相關源碼研究者優先;

　　4、具備ETL開發與運維能力，有Flume、kettle經驗優先;

　　5、熟悉大數據平臺的搭建過程，熟悉數據處理流程，有TB級以上數據處理經驗優先，有實時數據處理經驗者優先;

　　6、熟悉離線和實時數據處理流程，熟練使用Spark，Flink處理TB級數據優先;

　　7、熟悉Linux系統環境，有shell等腳本編寫經驗，熟悉Mysql、PostgreSql、Oracle等常用關系數據庫，熟練編寫SQL語句;

　　8、熟悉Yarn,Kubernetes,Azkaban等資源調度框架者優先;

　　9、熟悉Datax的二次開發，并有實際開發經驗優先。

大數據開發工程師的崗位職責 篇5

　　職責:

　　1、負責所分管團隊的團隊建設和日常管理工作;

　　2、負責核心技術問題攻關和性能優化，持續維護和引進最新的大數據技術到城市大數據平臺中，支撐城市級大數據平臺業務;

　　3、承擔城市數據標準編制和數據模型的設計;

　　4、承擔項目中數據相關方案設計及數據團隊管理;

　　5、參與城市大數據項目中數據采集、加工過程、分析挖掘模型算法的實施工作。

　　任職資格:

　　1、1年以上數據開發工作經驗，熟練使用SQL查詢引擎;

　　2、熟悉Hadoop、Mpp、Oracle等至少一種數據倉庫工具

　　3、具備良好的編程語言基礎如：java/python/scala/c++/shell等

　　4、二本以上學歷，計算機相關專業或者有相關培訓經歷者優先

　　5、 個人素質要求：目光長遠、態度誠懇、崗位有穩定性，能夠長期培養、具備很強的自學能力、承壓能力強、接受出差支援項目等工作。對數據工作具備濃厚的興趣并有明確職業規劃，優秀的學習能力和團隊溝通協作能力，對新技術有濃厚興趣并有鉆研精神。

大數據開發工程師的崗位職責 篇6

　　職責：

　　1. 參與軟件產品設計、開發、實施和維護，保證設計合理、應用技術得當。

　　2. 進行單元測試，確保功能穩定，性能優異，保證開發工作高質量完成。

　　3. 參與軟件設計的重構、優化，保證產品的可迭代、可維護性。

　　4. 參與軟件設計文檔的起草和完善，保證文檔及時更新。

　　任職要求：

　　1. 本科及以上學歷。

　　2. 有1年以上Java Web開發工作經驗;有高訪問量，高負載網站系統開發經驗者優先。

　　3. 熟悉Spring、Spring Boot、SpirngMVC，Mybatis/iBatis、Maven及前端Html5/CSS/Javascript等。

　　4、JAVA基礎扎實，理解IO、線程、集合等基礎框架，對JVM原理有一定的了解。

　　5、熟悉分布式、多線程及高性能的設計與編碼及性能調優。

　　6、熟悉Linux下的常用命令。

　　7、熟悉Mysql/Oracle等數據庫的開發和數據庫的維護。

　　8、有電力行業或軌道交通行業應用開發經驗者優先。

大數據開發工程師的崗位職責 篇7

　　職責：

　　1、根據公司信息化發展需要和業務流程要求，對ERP系統和OA平臺進行定制化二次開發和功能擴展，制定二次開發方案、計劃并實施，分析并解決開發過程中的問題;

　　2、或能自主開發滿足公司管理需要的軟件系統，負責軟件產品的架構設計、功能模塊設計、數據庫結構設計及核心代碼開發;

　　3、對ERP系統、OA平臺或自主開發軟件系統進行維護，保障軟件系統的穩定運行;

　　4、負責其他系統與ERP接口的技術支持;

　　5、完成上級臨時交辦的其他工作。

　　任職資格：

　　1、計算機、電子信息工程相關專業，大專以上學歷;

　　2、對ERP系統和OA平臺的功能和使用比較熟悉;

　　3、熟悉軟件系統開發過程，有編寫代碼、編寫腳本的經驗，熟悉至少兩種開發語言;

　　4、有二次開發經驗，熟悉ERP二次開發和實施經驗者優先;

　　5、具有數據庫及高級應用程序開發經驗;

　　6、具有通信協議接口開發經驗;

　　7、熟悉SQL Server、Oracle等數據庫開發。

大數據開發工程師的崗位職責 篇8

　　職責：

　　1.參與公司現有系統優化和新系統開發;

　　2.按照項目計劃完成模塊設計.編碼工作;

　　3.協助工程師測試和發布系統;

　　4.負責文檔撰寫，編碼期間撰寫清晰明了的注釋。

　　職位要求：

　　1.計算機相關專業專科以上學歷，1年以上相關工作經驗;

　　2.熟悉PHP語言及主流框架，同時具有java開發經驗為佳;

　　3.了解SQL.NoSQL，對數據庫設計以及性能優化有相關經驗;

　　4.了解 Linux 操作系統，能在linux下對項目進行基本的管理和部署;

　　5.具有良好的溝通能力，自學能力和積極進取的團隊合作精神;

　　6.有規范的文檔編寫習慣，定期總結整理技術文檔

大數據開發工程師的崗位職責 篇9

　　職責：

　　1.負責網站代碼的開發、維護及相關接口對接工作;

　　2.完成網站程序模塊代碼實現，編寫代碼注釋和開發文檔;

　　3.輔助進行網站系統的功能定義、程序設計，分析并解決軟件開發過程中的問題;

　　4.協助制定測試計劃，定位發現問題，定期維護網站程序，處理反快回來的系統bug;

　　5.完成上級交代的其他事情。

　　要求：

　　1、精通PHP+MYSQL,具備扎實的代碼功底以及良好的編程習慣

　　2、有電商平臺、微信公眾號、小程序開發經驗優先

　　3、熟練使用laravel框架，熟練操作Linux

　　4、需要有電商系統開發經驗，熟悉ECShop開發

大數據開發工程師的崗位職責 篇10

　　職責：

　　1.和產品經理溝通產品需求;

　　2.進行業務需求系統分析，提出技術研究及可行性報告及系統概要設計;

　　3.系統子模塊設計和數據庫設計;

　　4.詳細設計、代碼編寫和單元測試;

　　5.評審其它團隊成員的代碼;

　　6.調研、評估最新云服務技術并應用到當前項目。

　　任職要求：

　　1.計算機相關專業,本科及以上學歷(985/211優先考慮)，3年以上J2EE工作經驗;

　　2.熟練使用主流的開發框架，SpringMVC、MyBatis、SpringBoot等;

　　3.具有豐富的mysql使用與開發經驗，以及Redis等緩存數據庫技術經驗;

　　4.熟悉微服務設計;

　　5.熟悉maven/gradle、git，熟悉tomcat、nginx等開源項目

　　6.有高并發及大數據量系統開發經驗的優先;

　　7.有Restful API、spring cloud、dubbo開發經驗者的優先;

　　8.有GIS開發經驗的優先。

大數據開發工程師的崗位職責 篇11

　　職責：

　　1、負責企業網站產品的開發及技術設計;

　　2、從事php項目開發，能獨立開發、制作整站或獨立完成局部程序;

　　3、熟練使用PHP/MySQL開發;熟悉Sql語法，包括數據庫設計，速度優化;

　　4、熟悉Yii框架

　　5、熟悉php、Html5、JavaScript、div+CSS。

　　任職要求：

　　1、熟練使用PHP+MySQL，有扎實的php語言基礎知識，能獨立設計網站架構，完成前后臺代碼編寫工作;

　　2、專科及以上學歷,做過PHP網站程序開發2年工作經驗以上，能獨立完成一般性網站的開發，有大中型項目開發經驗優先;

　　3、熟練掌握thnkphp框架，熟悉smarty， 具有PHP開發經驗和MVC實際開發經驗;

　　4、熟悉各種WEB技術，并有實際的項目經驗;

　　5、良好的編程習慣、閱讀能力、理解能力、學習能力，思路清晰，工作規范。

大數據開發工程師的崗位職責 篇12

　　職責

　　1. 配合項目經理完成項目需求分析、功能及設計

　　2. 負責項目開發與測試，維護已有程序的升級和錯誤更正

　　3. 負責完成APP后臺數據的接收及發送，保證數據安全

　　4. 負責處理線上服務器及數據庫故障，及時解決問題

　　5. 負責服務器環境搭建及項目更新，保證項目穩定運行

　　6. 負責技術難點公關并帶領其他成員完成技術難點的推進和落實

　　任職要求

　　1. 必須要求：參與過短視頻或者視頻通話APP后臺開發

　　2. 大專及以上統招本科學歷

　　3. 2年以上PHP實際開發經驗

　　4. 精通PHP開發，對主流快速開發框架ThinkPHP、YII、Zend等熟悉并應用過至少其中一種

　　5. 必須具有對接APP的開發經驗，能夠獨立完成數據的設計

　　6. 熟悉流媒體視頻處理技術，在項目中應用過對短視頻處理技術

　　7. 對主流數據庫MySql，MSSQL等至少熟悉一種

大數據開發工程師的崗位職責 篇13

　　1、大型ERP產品的底層引擎與控件的開發、維護;

　　2、參與項目系統設計，完成程序開發與文檔編寫工作;

　　3、上級交代的其他任務;

大數據開發工程師的崗位職責 篇14

　　職責：

　　1、參與系統功能模塊設計工作;

　　2、參與代碼編寫、BUG修改、單元測試;

　　3、協助測試人員完成集成和系統測試;

　　4、完成研發經理或者上級主管分配的其它工作。

　　任職要求：

　　1、掌握Java編程語言，熟悉J2EE技術架構下的Web軟件開發;

　　2、熟練使用Eclipse開發工具，掌握Tomcat、Weblogic、Websphere等主流J2EE應用服務器的一種或多種;

　　3、扎實的數據庫基礎，掌握Oracle數據庫操作，能熟練使用SQL語言編程;

　　4、了解開發作業(PD設計、編碼和測試)的規范和技巧;

　　5、能夠按照要求編寫項目工程文檔，文檔結構條例清晰，內容詳實準確;

　　6、具備理解所擔當模塊的業務理解能力和問題闡述能力。

大數據開發工程師的崗位職責 篇15

　　職責：

　　1. 負責運營平臺以及移動應用服務器API開發與維護，編寫開發文檔;

　　2 .根據業務需求提出技術方案，負責系統框架的規劃、開發;

　　3. 熟悉支付業務流程，對已有模塊的調優和bug修復。

　　任職資格：

　　1. 計算機及相關專業，熟悉掌握PHP、熟悉面向對象編程;

　　2 .有成熟的項目經驗，能獨立處理開發中遇到的問題;

　　3 .熟悉Linux服務器相關知識，熟悉Nginx/Apache等服務搭建，對服務器搭建和系統性能調優有了解;

　　4 .熟悉掌握MySQL數據庫的使用，對高并發數據處理和數據優化有相應的處理方案;

　　5 .對緩存技術有了解，使用過Redis/Memcache/Mongodb等常見nosql數據庫之一。

大數據開發工程師的崗位職責 篇16

　　職責：

　　1、移動端，Web端H5開發，編寫可復用的用戶界面組件;

　　2、持續的優化前端體驗和頁面響應速度，并保證兼容性和執行效率;

　　3、負責前端產品的頁面制作，根據UI設計圖完成html5應用的編碼;

　　4、配合開發工程師一起研討技術實現方案，進行應用及系統整合;

　　5、測試維護并持續優化現有產品，修復bug，提高前端的用戶體驗及性能6、參與前端工程體系建設。

　　任職要求：

　　1. 扎實的計算機基礎,有至少1~3年的Web前端開發經驗;

　　2. 熟練使用Vue框;

　　3. 精通HTML5、CSS3、JavaScript等技術;

　　4. 有使用npm、webpack等開發工具的經驗;

　　5. 有跨瀏覽器開發經驗，理解不同瀏覽器之間的差異，代碼具有良好的兼容性;

　　6. 愛編程，且能快速解決問題;

　　7. 熱愛新的計算機技術，具有快速學習的能力;

大數據開發工程師的崗位職責 篇17

　　職責：

　　1、負責公司內部軟件產品的WEB服務器端、APP后臺的設計與開發;

　　2、官網(php)的修復開發，及二次開發

　　3、同時兼前端開發人員(小程序，微商城前端的開發)

　　4、精通PHP語言，精通HTTP等互聯網協議;

　　5、有良好的溝通，良好的團隊合作精神，能承受較大工作壓力。

　　任職要求：

　　1：大專以上學歷，計算機相關專業，3年以上php開發，

　　2：精通php，thinkphp等開發框架，相關開發工具

　　3：精通HTML,H5,CSS,Javascript，Ajax精通vue，js，AnsularJS，boststrap前端框架

　　4：熟練掌握各種前端開發工具，熟悉React-native框架，JQuery類庫，熟悉前后端分離開發模式

　　5：有實際商場社區類小程序開發經驗者優先

大數據開發工程師的崗位職責 篇18

　　職責：

　　1、負責網站后臺程序開發(PHP+Mysql)與網站運營人員、美工人員配合完成網站以及需求功能構建;

　　2、負責服務器的維護和保障安全運行;

　　3、WAP手機端網站的開發與維護;

　　4、負責網站安全監控與應急處理，維護網站使之保持可用性和穩定性;

　　5、根據項目任務計劃按時完成開發任務。

　　任職要求：

　　1、計算機相關專業，至少1年以上的PHP開發工作經驗，需要有微信小程序或微商城開發經驗;

　　2、有過實際的電商網站開發和部署經驗;

　　3、熟悉JS，PHP+Mysql等語言，能獨立完成開發任務;

　　4、熟悉至少一種PHP框架，如CodeIgniter/ThinkPHP/ZF

　　5、熟悉主流第三方支付接口，如支付寶，微信開發;

　　6、良好的編程習慣，結構清晰、命名規范、代碼冗余率低;

　　7、了解apache及apache配置，了解linux系統;了解IIS+PHP+Mysql配置;

　　8、會寫移動端接口，會H5頁面編寫。

　　9、工作經驗豐富者，

大數據開發工程師的崗位職責 篇19

　　職責：

　　1. 負責Zoom產品線Web前后端平臺架構設計和開發

　　2. 負責第三方系統和Zoom平臺的集成

　　3. 解決開發過程中的技術問題，支持、協助處理其他相關的技術問題

　　4. 進行程序性能的分析和優化工作

　　崗位要求：

　　1. 對互聯網的高并發、海量處理、負載均衡、容錯處理等有深入的理解和豐富的經驗優先

　　2. 計算機相關專業本科及以上學歷，3年以上Java開發經驗

　　3. 熟悉Java語言，基礎扎實，包括JVM、類裝載機制、多線程并發、IO、網絡等技術體系

　　4. 精通Java Web開發，熟悉HTTP協議和Servlet規范，掌握Spring、Spring MVC、Mybatis等Java開源框架

　　5. 熟悉MySQL數據庫設計，性能調優，以及數據庫熱備，快速切換等機制; 另外，熟悉Nosql如DynamoDB等優先

　　6. 學習能力強，熱衷技術，喜歡鉆研和嘗試新的技術

　　7. 具備良好的編碼規范，面向對象設計理解，熟悉面向對象設計原則，掌握設計模式及應用場景

　　8. 具備良好的溝通和團隊協作能力，工作積極主動，思路清晰，責任心強

　　9. 有SSO相關開發經驗(熟悉不同IDP的特性)優先