大數(shù)據(jù)架構(gòu)師的具體職責(zé)（通用30篇）
大數(shù)據(jù)架構(gòu)師的具體職責(zé) 篇1
職責(zé)：
1. 負責(zé)大數(shù)據(jù)基礎(chǔ)平臺、海量數(shù)據(jù)存儲/處理分布式平臺、數(shù)據(jù)分析系統(tǒng)架構(gòu)設(shè)計和研發(fā);
2. 負責(zé)實時計算平臺基礎(chǔ)架構(gòu)設(shè)計、部署、監(jiān)控、優(yōu)化升級;
3. 制定項目/數(shù)據(jù)倉庫設(shè)計及實現(xiàn)規(guī)范，指導(dǎo)設(shè)計研發(fā)和部署;
4. 協(xié)助策略和算法團隊工作，保障數(shù)據(jù)挖掘建模和工程化;
5. 深入研究大數(shù)據(jù)相關(guān)技術(shù)和產(chǎn)品，跟進業(yè)界先進技術(shù);
任職要求：
1. 全日制本科及以上學(xué)歷，5年以上軟件和分布式系統(tǒng)研發(fā)經(jīng)驗，3年以上大數(shù)據(jù)系統(tǒng)架構(gòu)經(jīng)驗;
2. 精通Hadoop/HBase/Spark/Storm/Redis技術(shù)及其生態(tài)圈;
3. 具備良好的系統(tǒng)分析能力、故障診斷能力;
4 有大數(shù)據(jù)策略、算法、可視化經(jīng)驗優(yōu)先。
大數(shù)據(jù)架構(gòu)師的具體職責(zé) 篇2
職責(zé)：
1、負責(zé)企業(yè)大數(shù)據(jù)平臺的基礎(chǔ)建設(shè)、管理及制定拓展規(guī)劃;
2、負責(zé)大數(shù)據(jù)平臺相關(guān)自動化服務(wù)工具的設(shè)計、開發(fā);
3、參與Hadoop、Hbase、Spark等核心平臺組件的開發(fā)、優(yōu)化;
4、對平臺特殊場景化的數(shù)據(jù)應(yīng)用制定相關(guān)實踐方案;
5、大數(shù)據(jù)團隊的搭建。
任職資格:
1、統(tǒng)招本科以上學(xué)歷，計算機等相關(guān)專業(yè)，5年以上工作經(jīng)驗;
2、具有Hadoop等大規(guī)模集群管理經(jīng)驗、海量(PB)數(shù)據(jù)處理經(jīng)驗;
3、精通Hadoop、Hive、Hbase等離線平臺相關(guān)組件的原理機制;
4、了解或熟悉Storm/Spark/Redis/Kafka/MongoDB等分布式系統(tǒng);
5、熟悉高并發(fā)、分布式開發(fā)等相關(guān)知識，具有后端服務(wù)優(yōu)化相關(guān)經(jīng)驗;
6、熟悉爬蟲常用框架以及反爬技術(shù);
7、具有良好的溝通能力、分析問題與攻關(guān)問題的能力;
8、有責(zé)任心，工作積極，對新領(lǐng)域新技術(shù)有熱情。
大數(shù)據(jù)架構(gòu)師的具體職責(zé) 篇3
職責(zé)：
1、負責(zé)大數(shù)據(jù)基礎(chǔ)平臺的整體規(guī)劃和架構(gòu)設(shè)計，參與需求分析、技術(shù)決策以及詳細設(shè)計;
2、為現(xiàn)有大數(shù)據(jù)集群Hadoop、hive平臺提供性能調(diào)優(yōu)、架構(gòu)優(yōu)化重組，解決系統(tǒng)中的關(guān)鍵問題和技術(shù)難題;
3、把握基礎(chǔ)業(yè)務(wù)復(fù)雜系統(tǒng)的設(shè)計，確保系統(tǒng)的架構(gòu)質(zhì)量，編寫核心部分代碼;
4、持續(xù)挑戰(zhàn)新的技術(shù)方向，攻克大數(shù)據(jù)量，高并發(fā)，穩(wěn)定性等各種技術(shù)難點。
任職資格:
1、計算機或相關(guān)專業(yè)本科及以上學(xué)歷;
2、5年以上hadoop的應(yīng)用開發(fā)經(jīng)驗，5年以上數(shù)據(jù)倉庫開發(fā)實踐經(jīng)驗，至少一個企業(yè)級數(shù)據(jù)倉庫項目開發(fā)經(jīng)驗或者大數(shù)據(jù)處理項目經(jīng)驗;
3、良好的編程開發(fā)能力，精通PHP及其他開發(fā)語言;
4、熟悉mysql等數(shù)據(jù)庫經(jīng)驗，具備優(yōu)秀的SQL編寫、調(diào)優(yōu)能力;
5、熟練掌握Linux常規(guī)命令與工具，精通shell, perl, python等腳本語言至少一種;
6、軟件基礎(chǔ)理論知識扎實，具有良好的數(shù)據(jù)結(jié)構(gòu)、算法功底;
7、對新技術(shù)敏感，學(xué)習(xí)能力強，樂于接受挑戰(zhàn)，具有良好的團隊合作精神;
大數(shù)據(jù)架構(gòu)師的具體職責(zé) 篇4
職責(zé)：
負責(zé)大數(shù)據(jù)平臺架構(gòu)的規(guī)劃和設(shè)計，主導(dǎo)系統(tǒng)的架構(gòu)設(shè)計和核心模塊開發(fā)，確保項目質(zhì)量和關(guān)鍵性能指標(biāo)達成;
負責(zé)大數(shù)據(jù)平臺技術(shù)框架的選型與技術(shù)難點攻關(guān),指導(dǎo)開發(fā)大數(shù)據(jù)平臺的開發(fā)，保證大數(shù)據(jù)產(chǎn)品的上線運行;
負責(zé)深入理解業(yè)務(wù)需求，對業(yè)務(wù)建模，設(shè)計系統(tǒng)架構(gòu)，滿足業(yè)務(wù)需求;
負責(zé)協(xié)助策略和算法工作,保障數(shù)據(jù)挖掘建模和工程化;
負責(zé)根據(jù)業(yè)務(wù)需求整合優(yōu)化數(shù)據(jù)架構(gòu)，保證產(chǎn)品的可靠性、穩(wěn)定性;
負責(zé)指導(dǎo)開發(fā)人員完成數(shù)據(jù)模型規(guī)劃建設(shè)、分析模型構(gòu)建及分析呈現(xiàn);
負責(zé)研發(fā)技術(shù)發(fā)展方向，新技術(shù)領(lǐng)域的探索，將新技術(shù)應(yīng)用到公司大數(shù)據(jù)平臺，提升公司效能
任職要求：
本科及以上學(xué)歷，擁有5年以上大數(shù)據(jù)平臺產(chǎn)品或分布式系統(tǒng)設(shè)計經(jīng)驗,6年以上的開發(fā)經(jīng)驗;
精通Hadoop，熟悉大數(shù)據(jù)生態(tài)技術(shù)，如Storm、Spark、Scala、Flume、Kafka、Zookeeper、Yarn、Sqoop、CDH、Solr 、Kylin、Impala、Hive、Hbase、Kerberos、Sentry等，有大規(guī)模集群架構(gòu)、開發(fā)及運維經(jīng)驗;
熟練掌握java/Scala語言,實現(xiàn)面向?qū)ο箝_發(fā)思想OOA,OOD,OOP;
熟悉linux操作系統(tǒng),熟練掌握腳本言語Shell/Perl/Python等編碼語言;
熟練掌握數(shù)據(jù)倉庫設(shè)計，開發(fā)工作。能夠根據(jù)業(yè)務(wù)設(shè)計并開發(fā)數(shù)據(jù)倉。
具備源碼級問題解決和集群優(yōu)化改造能力者優(yōu)先;
能快速的學(xué)習(xí)新的開源框架和知識體系，并應(yīng)用到現(xiàn)有架構(gòu)體系中;
邏輯清晰，快速的學(xué)習(xí)能力，良好的溝通能力、團隊協(xié)調(diào)能力。
具備良好的團隊合作精神，較強的溝通交流能力，具備良好的技術(shù)領(lǐng)導(dǎo)能力;
具備良好的文檔撰寫能力和技術(shù)團隊管理能力
大數(shù)據(jù)架構(gòu)師的具體職責(zé) 篇5
職責(zé)：
1、數(shù)據(jù)分析軟件平臺架構(gòu)搭建
2、負責(zé)深度學(xué)習(xí)核心框架或高性能后臺服務(wù)系統(tǒng)的架構(gòu)設(shè)計工作，包括系統(tǒng)總體規(guī)劃、架構(gòu)設(shè)計、系統(tǒng)分析、軟件實現(xiàn)、性能優(yōu)化;
3、指導(dǎo)開發(fā)人員開發(fā)，并解決系統(tǒng)出現(xiàn)的問題，理解物業(yè)需求;
4、制定開發(fā)計劃和控制開發(fā)進度，負責(zé)指導(dǎo)研發(fā)團隊開展設(shè)計工作;
任職要求：
1、碩士以上，計算機或先關(guān)專業(yè);
2、5年左右軟件開發(fā)經(jīng)驗，含3年以上系統(tǒng)分析、設(shè)計經(jīng)驗，有大型軟件項目大型軟件項目;有中大型互聯(lián)網(wǎng)企業(yè)數(shù)據(jù)庫架構(gòu)設(shè)計及管理經(jīng)驗，
3、 具備良好的組件級建模能力，熟悉HTTP、TCP等協(xié)議
4、熟練使用UML進行軟件架構(gòu)設(shè)計，至少精通EA，RATIONAL， VISIO等一種設(shè)計工具.
5、精通至少一種編程語言，熟悉 Linux 相關(guān)技術(shù)，能獨立在上面進行開發(fā)、測試和部署
6、深入理解數(shù)據(jù)庫、數(shù)據(jù)倉庫、大數(shù)據(jù)、分布式體系架構(gòu)和關(guān)鍵技術(shù)
大數(shù)據(jù)架構(gòu)師的具體職責(zé) 篇6
職責(zé)：
1、負責(zé)大數(shù)據(jù)平臺的技術(shù)選型，基于Spark、Hadoop大數(shù)據(jù)平臺建設(shè)和開發(fā);
2、完成包括數(shù)據(jù)模型設(shè)計、數(shù)據(jù)采集、數(shù)據(jù)存儲等方面的大數(shù)據(jù)系統(tǒng)架構(gòu)的設(shè)計和數(shù)據(jù)層架構(gòu)設(shè)計;
3、構(gòu)建數(shù)據(jù)中臺，為多種行業(yè)應(yīng)用提供主數(shù)據(jù)(畫像標(biāo)簽/關(guān)系圖譜)、數(shù)據(jù)模型、人工智能業(yè)務(wù)算法及數(shù)據(jù)服務(wù)。
4、對海量數(shù)據(jù)處理的業(yè)務(wù)需求進行評估和方案設(shè)計、拆分任務(wù)并指導(dǎo)工程師完成開發(fā);
5、帶領(lǐng)大數(shù)據(jù)技術(shù)團隊提供并實現(xiàn)大數(shù)據(jù)平臺上各項數(shù)據(jù)分析和數(shù)據(jù)可視化的架構(gòu)設(shè)計，支撐解決方案實施。
任職要求：
1、本科及以上學(xué)歷，具有5年及以上大數(shù)據(jù)架構(gòu)設(shè)計和開發(fā)經(jīng)驗;2年及以上帶領(lǐng)團隊經(jīng)驗;溝通能力強。在大型互聯(lián)網(wǎng)企業(yè)從事大數(shù)據(jù)架構(gòu)設(shè)計者優(yōu)先考慮;有分布式大型商業(yè)軟件系統(tǒng)設(shè)計經(jīng)驗、主導(dǎo)過大型商業(yè)軟件的架構(gòu)設(shè)計并取得過市場商業(yè)成功者優(yōu)先考慮;
2、熟悉整個大數(shù)據(jù)的完整處理流程，包括數(shù)據(jù)的采集、清洗、預(yù)處理、存儲、分析挖據(jù)、機器學(xué)習(xí)和數(shù)據(jù)可視化;
3、精通Oracle/MySQL/PostgreSQL/Greenplum/MongoDB等其中至少一種主流數(shù)據(jù)庫的使用，并能進行性能調(diào)優(yōu);
4、具備優(yōu)秀的團隊意識和溝通能力，學(xué)習(xí)能力和主動性強，具有鉆研精神，充滿激情，樂于接受挑戰(zhàn)。
大數(shù)據(jù)架構(gòu)師的具體職責(zé) 篇7
職責(zé)：
1、負責(zé)面向政府信領(lǐng)域的企業(yè)(不限于)大數(shù)據(jù)平臺、大數(shù)據(jù)應(yīng)用等系統(tǒng)的架構(gòu)設(shè)計、技術(shù)規(guī)劃、技術(shù)選型
2、跟進業(yè)界大數(shù)據(jù)技術(shù)發(fā)展動態(tài)，匹配行業(yè)應(yīng)用訴求，制定大數(shù)據(jù)策略，提前識別關(guān)鍵技術(shù)并完成技術(shù)驗證;
3、支撐售前完成項目解決方案技術(shù)架構(gòu)的設(shè)計及重要客戶的交流;
4、負責(zé)指導(dǎo)研發(fā)完成大數(shù)據(jù)產(chǎn)品的開發(fā)
5、帶領(lǐng)團隊進行產(chǎn)品核心技術(shù)的創(chuàng)新和積累
崗位要求：
1、熟悉BI和大數(shù)據(jù)領(lǐng)域的解決方案，具備該領(lǐng)域全面的技術(shù)積累，包括報表平臺，OLAP引擎和DB，ETL，數(shù)據(jù)倉庫建模和設(shè)計，海量分布式數(shù)據(jù)處理分析架構(gòu);
2、在大數(shù)據(jù)處理和分析領(lǐng)域具有3年或者以上的技術(shù)規(guī)劃、架構(gòu)設(shè)計經(jīng)驗，并有成功的項目實踐;
3、4年以上Hadoop實戰(zhàn)經(jīng)驗，熟悉Hadoop底層文件系統(tǒng)及分布式計算框架，具備傳統(tǒng)數(shù)據(jù)倉庫、MPP、Hadoop等混搭平臺架構(gòu)的設(shè)計能力和數(shù)據(jù)建模能力，對大規(guī)模數(shù)據(jù)并行計算、傳輸、處理等有豐富的經(jīng)驗;
4、有實際應(yīng)用storm、spark、flume、kafka等項目經(jīng)驗優(yōu)先;
5、卓越的技術(shù)領(lǐng)導(dǎo)力，善于溝通、發(fā)現(xiàn)和解決產(chǎn)品需求階段、開發(fā)階段和測試階段的問題，并能提供合理解決方案，有大中型互聯(lián)網(wǎng)企業(yè)工作背景優(yōu)先。
大數(shù)據(jù)架構(gòu)師的具體職責(zé) 篇8
職責(zé)：
1、負責(zé)大數(shù)據(jù)平臺架構(gòu)的規(guī)劃與設(shè)計;
2、負責(zé)大數(shù)據(jù)平臺技術(shù)框架的選型與技術(shù)難點攻關(guān);
3、參與企業(yè)級大數(shù)據(jù)產(chǎn)品和應(yīng)用規(guī)劃;
4、研究跟進大數(shù)據(jù)架構(gòu)領(lǐng)域新技術(shù)并分享;
5、大數(shù)據(jù)處理和分析應(yīng)用平臺的設(shè)計指導(dǎo)。
任職資格：
1、 具備深厚的分布式系統(tǒng)或數(shù)據(jù)庫系統(tǒng)的理論基礎(chǔ)，熟悉分布式計算系統(tǒng)的工作機制，具有分布式文件系統(tǒng)、分布式數(shù)據(jù)庫系統(tǒng)、集群存儲系統(tǒng)等架構(gòu)設(shè)計經(jīng)驗;
2、熟悉BI平臺架構(gòu)及相關(guān)項目標(biāo)準(zhǔn)，大數(shù)據(jù)解決方案包括Hadoop、Spark、Storm、機器學(xué)習(xí)等大數(shù)據(jù)平臺解決方案;
3、熟悉MySql/Postgresql/Oracle/MongoDB/Redis等主流數(shù)據(jù)數(shù)據(jù)庫;
4、 精通Linux/Unix環(huán)境，精通J java、scala、python、R中的一種或多種語言;
5、 具備優(yōu)秀的團隊意識和溝通能力，學(xué)習(xí)能力和主動性強，具有鉆研精神，充滿激情，樂于接受挑戰(zhàn);
6、大專及以上學(xué)歷，3年及以上工作經(jīng)驗。
大數(shù)據(jù)架構(gòu)師的具體職責(zé) 篇9
1. 負責(zé)大數(shù)據(jù)項目整體架構(gòu)規(guī)劃，包括應(yīng)用架構(gòu)、技術(shù)架構(gòu)、物理架構(gòu)和數(shù)據(jù)架構(gòu)等;
2. 負責(zé)指導(dǎo)工程師進行技術(shù)驗證與實現(xiàn)，核心技術(shù)問題的攻關(guān)，解決項目開發(fā)過程中的技術(shù)難題;
3. 負責(zé)項目對外技術(shù)溝通，具有較強的溝通，表達和文檔撰寫能力;
4. 根據(jù)公司項目和業(yè)務(wù)發(fā)展特點，負責(zé)研究相關(guān)大數(shù)據(jù)前沿技術(shù);
5. 推動技術(shù)能力的沉淀。
大數(shù)據(jù)架構(gòu)師的具體職責(zé) 篇10
1、數(shù)據(jù)分析軟件平臺架構(gòu)搭建
2、負責(zé)深度學(xué)習(xí)核心框架或高性能后臺服務(wù)系統(tǒng)的架構(gòu)設(shè)計工作，包括系統(tǒng)總體規(guī)劃、架構(gòu)設(shè)計、系統(tǒng)分析、軟件實現(xiàn)、性能優(yōu)化；
3、指導(dǎo)開發(fā)人員開發(fā)，并解決系統(tǒng)出現(xiàn)的問題，理解物業(yè)需求；
4、制定開發(fā)計劃和控制開發(fā)進度，負責(zé)指導(dǎo)研發(fā)團隊開展設(shè)計工作；
大數(shù)據(jù)架構(gòu)師的具體職責(zé) 篇11
1、負責(zé)大數(shù)據(jù)項目技術(shù)架構(gòu)評估與設(shè)計；
2、負責(zé)關(guān)鍵功能的開發(fā)，技術(shù)難題的解決，以及輸出代碼的關(guān)鍵把控；
3、負責(zé)對使用關(guān)鍵技術(shù)的預(yù)研和選型，完成PoC；
4、指導(dǎo)工程師完成開發(fā)工作，并能分享技術(shù)經(jīng)驗。
大數(shù)據(jù)架構(gòu)師的具體職責(zé) 篇12
職責(zé)：
1.負責(zé)企業(yè)數(shù)據(jù)中心建設(shè)，設(shè)計數(shù)據(jù)邏輯模型和物理模型，并完成相關(guān)開發(fā)
2.梳理公司各業(yè)務(wù)線常用的指標(biāo)和維度，統(tǒng)一指標(biāo)定義口徑
3.根據(jù)數(shù)據(jù)應(yīng)用開發(fā)和數(shù)據(jù)分析需求，設(shè)計數(shù)據(jù)倉庫信息層模型，提高數(shù)據(jù)開發(fā)的效率
4.負責(zé)數(shù)據(jù)模型的運營和優(yōu)化，及時響應(yīng)業(yè)務(wù)邏輯變更，保證模型的數(shù)據(jù)質(zhì)量和穩(wěn)定性
5.負責(zé)公司數(shù)據(jù)標(biāo)簽體系的建設(shè)，并推動標(biāo)簽體系在實際業(yè)務(wù)場景中落地
崗位要求：
1.5年以上DW/BI數(shù)據(jù)架構(gòu)設(shè)計、模型設(shè)計和性能調(diào)優(yōu)等相關(guān)經(jīng)驗
2.有較強的數(shù)據(jù)分析能力，精通數(shù)據(jù)倉庫架構(gòu)，熟悉Erwin或PowerDesigner建模工具
3.精通一種主流關(guān)系數(shù)據(jù)庫(如mysql等)，熟悉Hive開發(fā)
4.有電商業(yè)務(wù)經(jīng)驗，元數(shù)據(jù)管理，數(shù)據(jù)質(zhì)量管理或標(biāo)簽體系搭建經(jīng)驗者優(yōu)先
5.優(yōu)秀的協(xié)調(diào)溝通與團隊協(xié)作能力，極強的責(zé)任心，能承受一定的工作壓力，認同企業(yè)文化和團隊價值
大數(shù)據(jù)架構(gòu)師的具體職責(zé) 篇13
1、正確理解業(yè)務(wù)需求，對需求進行工作量評估；
2、參與項目相關(guān)的需求、設(shè)計、投產(chǎn)手冊等文檔的編寫；
3、根據(jù)進度計劃，完成所承擔(dān)功能模塊的`設(shè)計、開發(fā)、單元測試、聯(lián)調(diào)測試；
4、配合測試組修復(fù)代碼缺陷，確保功能實現(xiàn)與代碼質(zhì)量；
5、負責(zé)所承擔(dān)功能模塊投產(chǎn)、部署，及上線后的日常維護；
6、完成項目經(jīng)理或者架構(gòu)師安排的其他工作；
大數(shù)據(jù)架構(gòu)師的具體職責(zé) 篇14
1、負責(zé)大數(shù)據(jù)平臺的架構(gòu)設(shè)計、核心代碼開發(fā)等任務(wù)；根據(jù)項目要求編寫相關(guān)技術(shù)文檔；
2、負責(zé)大數(shù)據(jù)平臺的架構(gòu)評審，代碼評審，上線評審；參與數(shù)據(jù)應(yīng)用需求、設(shè)計、審核和評審；
3、負責(zé)核心模塊研發(fā)，負責(zé)大數(shù)據(jù)平臺的搭建，完成系統(tǒng)調(diào)試、集成與實施；
4、負責(zé)建立和維護大數(shù)據(jù)平臺技術(shù)標(biāo)準(zhǔn)規(guī)范，指導(dǎo)開發(fā)人員編寫代碼；
大數(shù)據(jù)架構(gòu)師的具體職責(zé) 篇15
職責(zé)：
1、負責(zé)大數(shù)據(jù)開發(fā)團隊建設(shè);
2、負責(zé)行業(yè)大數(shù)據(jù)產(chǎn)品架構(gòu)設(shè)計與研發(fā);
3、負責(zé)帶領(lǐng)團隊進行行業(yè)大數(shù)據(jù)產(chǎn)品關(guān)鍵技術(shù)攻關(guān)。
任職要求：
1、有三年以上大數(shù)據(jù)應(yīng)用、開發(fā)經(jīng)驗;具備海量數(shù)據(jù)加工處理(ETL)相關(guān)經(jīng)驗，對數(shù)據(jù)挖掘及機器學(xué)習(xí)有較為深刻的理解;
2、熟悉Hadoop相關(guān)技術(shù)，對HDFS、MapReduce、Hive、HBase有一定的使用和開發(fā)經(jīng)驗;
3、熟悉Linux，熟練使用Shell或Python，進行腳本編寫;
4、對數(shù)據(jù)結(jié)構(gòu)和數(shù)據(jù)統(tǒng)計分析算法有較為深刻理解;
5、掌握至少一種主流關(guān)系數(shù)據(jù)庫開發(fā)技術(shù)：Oracle、SQL Server、MySQL等;
6、掌握實時流計算技術(shù)，有Spark、Storm開發(fā)經(jīng)驗者優(yōu)先;
7、需要具備2年以上研發(fā)團隊管理經(jīng)驗。
大數(shù)據(jù)架構(gòu)師的具體職責(zé) 篇16
職責(zé):
1、從事電信行業(yè)大數(shù)據(jù)項目相關(guān)業(yè)務(wù)調(diào)研、產(chǎn)品標(biāo)準(zhǔn)建設(shè)、核心模型設(shè)計和優(yōu)化、系統(tǒng)測試等相關(guān)工作
2、與數(shù)據(jù)專業(yè)委員會一起研究數(shù)據(jù)建模方案和建模工具，負責(zé)產(chǎn)品線產(chǎn)品的數(shù)據(jù)架構(gòu)、數(shù)據(jù)模型設(shè)計
3、參與研究數(shù)據(jù)庫之間的數(shù)據(jù)轉(zhuǎn)換方式，參與項目中的數(shù)據(jù)移植工作，收集在項目中的數(shù)據(jù)移植經(jīng)驗，優(yōu)化產(chǎn)品的數(shù)據(jù)模型
4、負責(zé)培訓(xùn)本部門隊伍的數(shù)據(jù)模型基礎(chǔ)理論工作，建立數(shù)據(jù)模型團隊
崗位要求：
1、統(tǒng)招本科學(xué)歷，3年以上主流數(shù)據(jù)上(DB2、Oracle、SQLServer、Mysql等)ETL設(shè)計、開發(fā)經(jīng)驗，具備大型數(shù)據(jù)倉庫邏輯模型和物理模型設(shè)計經(jīng)驗，精通SQL，有較好的SQL性能調(diào)優(yōu)經(jīng)驗;
2、擁有Python，R等數(shù)學(xué)建模工具的使用經(jīng)驗，并具備一定的數(shù)據(jù)處理和建模經(jīng)驗，可以輸出相應(yīng)的模型分析結(jié)果、模型比較、模型效率以及對模型的理論和判斷依據(jù)方法并對其進行完整的解釋和說明;
3、熟悉統(tǒng)計學(xué)基本原理，做過實戰(zhàn)的數(shù)據(jù)建模項目;
4、有分布式數(shù)據(jù)倉庫建設(shè)相關(guān)經(jīng)驗者優(yōu)先，具備電信行業(yè)數(shù)據(jù)倉庫建設(shè)相關(guān)經(jīng)驗者優(yōu)先;
大數(shù)據(jù)架構(gòu)師的具體職責(zé) 篇17
1.負責(zé)公司大數(shù)據(jù)底層框架的整體架構(gòu)設(shè)計，結(jié)合公司實際業(yè)務(wù)情況進行技術(shù)選型及大數(shù)據(jù)戰(zhàn)略規(guī)劃；
2.負責(zé)統(tǒng)一數(shù)據(jù)平臺項目的整體評估、設(shè)計、架構(gòu)及關(guān)鍵模塊的開發(fā)，不斷提升系統(tǒng)的穩(wěn)定性和效率；
3.負責(zé)架構(gòu)優(yōu)化及系統(tǒng)關(guān)鍵模塊的設(shè)計開發(fā)，協(xié)助團隊解決開發(fā)過程中的技術(shù)難題；
4.建立良好的公司內(nèi)外的業(yè)界技術(shù)影響力；有效輔導(dǎo)團隊，提升數(shù)據(jù)研發(fā)能力；
大數(shù)據(jù)架構(gòu)師的具體職責(zé) 篇18
職責(zé)：
1、負責(zé)DMP技術(shù)架構(gòu)設(shè)計與構(gòu)建，根據(jù)業(yè)務(wù)規(guī)劃及技術(shù)規(guī)劃制定應(yīng)用架構(gòu)方案;
2、負責(zé)設(shè)計構(gòu)建DMP數(shù)據(jù)采集、存儲及分析框架，設(shè)計數(shù)據(jù)處理的技術(shù)流程和規(guī)范;
3、負責(zé)核心功能的架構(gòu)與代碼模板編寫，開發(fā)與維護系統(tǒng)公用核心模塊;
4、負責(zé)基于大數(shù)據(jù)技術(shù)的海量數(shù)據(jù)的自動化分析處理和統(tǒng)計工作。
崗位要求：
1、計算機或相關(guān)專業(yè)本科以上學(xué)歷，三年以上的開發(fā)經(jīng)驗，二年以上大數(shù)據(jù)相關(guān)軟件架構(gòu)的實際經(jīng)驗;
2、精通大數(shù)據(jù)處理技術(shù)，熟悉Hadoop/Storm技術(shù)體系，有Hadoop、Hive、Hbase項目經(jīng)驗;
3、具有較強的架構(gòu)能力，具有分布式計算、實時計算、數(shù)據(jù)倉庫、數(shù)據(jù)挖掘系統(tǒng)的架構(gòu)經(jīng)歷優(yōu)先;
4、對數(shù)據(jù)敏感，洞察力強，了解國內(nèi)外廣告發(fā)展趨勢;
5.、擅長系統(tǒng)分析與設(shè)計，精通常用的設(shè)計模式，擅長性能調(diào)優(yōu);
6、熟悉DMP/RTB技術(shù)原理，了解用戶的行為分析及建模;有RTB/DSP/SSP/EXCHANGE/DMP等廣告行業(yè)從業(yè)經(jīng)歷。
大數(shù)據(jù)架構(gòu)師的具體職責(zé) 篇19
職責(zé)：
1、搭建基于Hadoop/Spark的數(shù)據(jù)挖掘體系和大數(shù)據(jù)分析系統(tǒng)架構(gòu);
2、研究大數(shù)據(jù)領(lǐng)域前沿數(shù)據(jù)挖掘技術(shù)，并引入相應(yīng)技術(shù)在數(shù)據(jù)中心的使用;
3、進行大數(shù)據(jù)系統(tǒng)框架設(shè)計、模型算法開發(fā);
4、負責(zé)大型數(shù)據(jù)挖掘項目方案制定、項目實施落地及優(yōu)化等 ;
5、開展數(shù)據(jù)爬取、聚類分析、輿情分析、魚骨圖分析、定價策略等領(lǐng)域數(shù)據(jù)挖掘工作;
任職資格：
1、本科以上學(xué)歷(持有學(xué)士學(xué)位)(985，211優(yōu)先)，計算機相關(guān)專業(yè)，五年工作經(jīng)驗;
2、二年以上數(shù)據(jù)挖掘項目經(jīng)驗，完整參與過數(shù)據(jù)挖掘大數(shù)據(jù)平臺的架構(gòu)開發(fā)過程，具備互聯(lián)網(wǎng)行業(yè)背景優(yōu)先;
3、精通分布式計算框架(hadoop、spark、Storm等)及相關(guān)經(jīng)驗，熟練掌握Hive/SQL，Python，熟悉Python、R相關(guān)數(shù)值科學(xué)計算庫(NumPy,SciPy等);
4、了解傳統(tǒng)的BI/DW 理論，能結(jié)合傳統(tǒng)BI實踐設(shè)計大數(shù)據(jù)平臺;
5、熟悉常用機器學(xué)習(xí)算法(如分類、回歸、聚類、關(guān)聯(lián)規(guī)則等)及其原理，具備應(yīng)用場景經(jīng)驗，如用戶畫像、商品關(guān)聯(lián)度分析、輿情分析;
6、熟悉主數(shù)據(jù)、元數(shù)據(jù)、數(shù)據(jù)質(zhì)量、和數(shù)據(jù)建模等數(shù)據(jù)治理相關(guān)的體系和方法;
7、具備較強的邏輯思維能力、數(shù)據(jù)敏感度，擅于利用數(shù)據(jù)發(fā)現(xiàn)問題及解決問題;
大數(shù)據(jù)架構(gòu)師的具體職責(zé) 篇20
1)負責(zé)公司軟件產(chǎn)品整體架構(gòu)的設(shè)計和關(guān)鍵功能實現(xiàn)
2)負責(zé)公司架構(gòu)長期看護以及優(yōu)化；
3)負責(zé)軟件部門各模組間的協(xié)調(diào)配合；
4)提高鞏固軟件代碼質(zhì)量；
5)負責(zé)大數(shù)據(jù)流式框架的設(shè)計、優(yōu)化及部署；
6)規(guī)劃研發(fā)部門員工的技術(shù)發(fā)展路線并提供必要的幫助和指導(dǎo)
大數(shù)據(jù)架構(gòu)師的具體職責(zé) 篇21
職責(zé)：
1.負責(zé)數(shù)據(jù)倉庫建設(shè)，基于數(shù)據(jù)驅(qū)動構(gòu)建企業(yè)級數(shù)據(jù)模型，根據(jù)架構(gòu)設(shè)計進行各層數(shù)據(jù)模型開發(fā)。
2.面向PB級別超大規(guī)模數(shù)據(jù)處理和查詢需求，設(shè)計適合業(yè)務(wù)變化的合理的多維數(shù)據(jù)分析系統(tǒng)架構(gòu)，滿足多樣性需求。
3.構(gòu)建設(shè)計良好的數(shù)據(jù)流、調(diào)度系統(tǒng)、查詢引擎、監(jiān)控系統(tǒng)，保證系統(tǒng)穩(wěn)定高效運行，以實現(xiàn)數(shù)據(jù)的最大價值。
4.指導(dǎo)團隊成員開展數(shù)據(jù)倉庫建設(shè)。
5.參與重點項目的評審，參與企業(yè)數(shù)據(jù)管理體系建設(shè)。
任職要求：
1.統(tǒng)招本科及以上學(xué)歷。
2.從事數(shù)據(jù)倉庫領(lǐng)域至少5年以上，熟悉數(shù)據(jù)倉庫模型設(shè)計與ETL開發(fā)經(jīng)驗 ，掌握Kimball的維度建模設(shè)計方法，具備海量數(shù)據(jù)加工處理(ETL)相關(guān)經(jīng)驗 。
3.具有一定數(shù)據(jù)模型和數(shù)據(jù)架構(gòu)基礎(chǔ)，熟悉hadoop\hive和常用數(shù)據(jù)庫。
4. 精通SQL，有一定的SQL性能調(diào)優(yōu)經(jīng)驗，熟悉hive sql的開發(fā)。
5.具有管理團隊開發(fā)經(jīng)驗，具備良好的組織能力、協(xié)調(diào)能力及項目管理能力。
6.具有較好的文字功底及語言表達能力，能夠快速、準(zhǔn)確地理解需求。
7.具有專研、快速學(xué)習(xí)和創(chuàng)新精神，具備獨立分析問題和解決問題的能力。
8.具有責(zé)任心，時間觀念強，工作獨立性強，有良好的團隊合作精神。
9.全日制普通本科畢業(yè)。
大數(shù)據(jù)架構(gòu)師的具體職責(zé) 篇22
職責(zé)：
1.參與公司數(shù)據(jù)平臺系統(tǒng)規(guī)劃和架構(gòu)工作，主導(dǎo)系統(tǒng)的架構(gòu)設(shè)計和項目實施，確保項目質(zhì)量和關(guān)鍵性能指標(biāo)達成;
2.統(tǒng)籌和推進制造工廠內(nèi)部數(shù)據(jù)系統(tǒng)的構(gòu)建，搭建不同來源數(shù)據(jù)之間的邏輯關(guān)系，能夠為公司運營診斷、運營效率提升提供數(shù)據(jù)支持;
3.負責(zé)數(shù)據(jù)系統(tǒng)需求對接、各信息化系統(tǒng)數(shù)據(jù)對接、軟件供應(yīng)商管理工作
5.根據(jù)現(xiàn)狀制定總體的數(shù)據(jù)治理方案及數(shù)據(jù)體系建立，包括數(shù)據(jù)采集、接入、分類、開發(fā)標(biāo)準(zhǔn)和規(guī)范，制定全鏈路數(shù)據(jù)治理方案;深入挖掘公司數(shù)據(jù)業(yè)務(wù)，超強的數(shù)據(jù)業(yè)務(wù)感知力，挖掘數(shù)據(jù)價值，推動數(shù)據(jù)變現(xiàn)場景的落地，為決策及業(yè)務(wù)賦能;
6.定義不同的數(shù)據(jù)應(yīng)用場景，推動公司的數(shù)據(jù)可視化工作，提升公司數(shù)據(jù)分析效率和數(shù)據(jù)價值轉(zhuǎn)化。
任職要求：
1.本科以上學(xué)歷，8年以上軟件行業(yè)從業(yè)經(jīng)驗，5年以上大數(shù)據(jù)架構(gòu)設(shè)計經(jīng)驗，熟悉BI平臺、大數(shù)據(jù)系統(tǒng)相關(guān)技術(shù)架構(gòu)及技術(shù)標(biāo)準(zhǔn);
2.熟悉數(shù)據(jù)倉庫、熟悉數(shù)據(jù)集市，了解數(shù)據(jù)挖掘、數(shù)據(jù)抽取、數(shù)據(jù)清洗、數(shù)據(jù)建模相關(guān)技術(shù);
3.熟悉大數(shù)據(jù)相關(guān)技術(shù)：Hadoop、Hive、Hbase、Storm、Flink、Spark、Kafka、RabbitMQ;
4.熟悉制造企業(yè)信息化系統(tǒng)及相關(guān)數(shù)據(jù)庫技術(shù);
5.具備大數(shù)據(jù)平臺、計算存儲平臺、可視化開發(fā)平臺經(jīng)驗，具有制造企業(yè)大數(shù)據(jù)系統(tǒng)項目開發(fā)或?qū)嵤┙?jīng)驗優(yōu)先;
6.對數(shù)據(jù)敏感，具備優(yōu)秀的業(yè)務(wù)需求分析和報告展示能力，具備制造企業(yè)數(shù)據(jù)分析和數(shù)據(jù)洞察、大數(shù)據(jù)系統(tǒng)的架構(gòu)設(shè)計能力，了解主流的報表工具或新興的前端報表工具;
7.有較強的溝通和組織協(xié)調(diào)能力，具備結(jié)果導(dǎo)向思維，有相關(guān)項目管理經(jīng)驗優(yōu)先。
大數(shù)據(jù)架構(gòu)師的具體職責(zé) 篇23
1.負責(zé)大數(shù)據(jù)基礎(chǔ)和應(yīng)用平臺的整體規(guī)劃和架構(gòu)設(shè)計，參與需求分析，架構(gòu)設(shè)計，詳細設(shè)計以及技術(shù)選型決策
2.參與數(shù)據(jù)挖掘和建模相關(guān)核心算法的代碼實現(xiàn)
3.負責(zé)大數(shù)據(jù)算法平臺的技術(shù)把關(guān)，性能調(diào)優(yōu)，控制架構(gòu)質(zhì)量，解決項目技術(shù)難題；對研發(fā)項目和任務(wù)需求進行評估和方案設(shè)計、拆分任務(wù)并指導(dǎo)工程師完成開發(fā)
4.帶領(lǐng)團隊提供并實現(xiàn)大數(shù)據(jù)算法平臺上各項數(shù)據(jù)接入、數(shù)據(jù)挖掘分析及數(shù)據(jù)可視化的架構(gòu)設(shè)計與能力，支持解決方案實施
5.負責(zé)數(shù)據(jù)庫設(shè)計、應(yīng)用架構(gòu)設(shè)計、核心技術(shù)選型等工作
6.協(xié)調(diào)解決開發(fā)中的技術(shù)問題、設(shè)計和監(jiān)控運營指標(biāo)，保障系統(tǒng)穩(wěn)定運行
7.培養(yǎng)，指導(dǎo)有能力的員工，指導(dǎo)工程師進行技術(shù)驗證實現(xiàn)，核心技術(shù)攻關(guān)，解決開發(fā)過程中的技術(shù)難題
大數(shù)據(jù)架構(gòu)師的具體職責(zé) 篇24
職責(zé)：
1. 負責(zé)設(shè)計企業(yè)級大數(shù)據(jù)平臺的整體架構(gòu)，從技術(shù)層面制定清晰的大數(shù)據(jù)產(chǎn)品與系統(tǒng)技術(shù)架構(gòu)，并負責(zé)實現(xiàn)關(guān)鍵技術(shù)和產(chǎn)品。
2. 負責(zé)設(shè)計具有創(chuàng)新價值的大數(shù)據(jù)底層平臺、大數(shù)據(jù)上層應(yīng)用系統(tǒng)等，帶領(lǐng)團隊完成有質(zhì)變的技術(shù)解決方案。
3. 負責(zé)組織同事研究行內(nèi)最前沿的技術(shù)發(fā)展方向，突破現(xiàn)有的技術(shù)難題。
4. 負責(zé)研究院對外項目合作協(xié)調(diào)與支持，編寫項目建設(shè)方案及后期項目建設(shè)支持。
任職要求：
1. 碩士及以上學(xué)歷，計算機相關(guān)專業(yè)。
2. JAVA基礎(chǔ)扎實,不少于8年的一線開發(fā)經(jīng)驗，精通Spring boot/MyBatis/Restful API的開發(fā)與管理. 熟悉ReactJS/Angular/Vue之一前端開發(fā)技術(shù)，熟悉Maven或Ant.，熟悉Python語言開發(fā)加分。
3. 不少于4年大數(shù)據(jù)的直接研發(fā)經(jīng)驗，精通Hadoop/Spark系統(tǒng)，有hands-on的架構(gòu)設(shè)計、性能調(diào)優(yōu)、開發(fā)經(jīng)驗。有MongoDB、Kafka、Hbase/Cassandra/Storm/Hive 等系統(tǒng)的開發(fā)經(jīng)驗。
4. 掌握分布式系統(tǒng)原理，對分布式存儲、流式計算、消息隊列中的一項或多項有深入的理解和認識。
5. 熟悉分布式系統(tǒng)的監(jiān)控、運維、故障恢復(fù)，高可用原理和設(shè)計理念。
6. 算法基礎(chǔ)扎實，熟悉常見的數(shù)據(jù)結(jié)構(gòu)，掌握大規(guī)模高并發(fā)訪問、大數(shù)據(jù)開發(fā)等處理經(jīng)驗;熟練的Linux系統(tǒng), 網(wǎng)絡(luò), 內(nèi)存和存儲等方面知識。
7. 必須要有千萬級別的項目管理經(jīng)驗，包括但不限于前期需求溝通，建設(shè)方案編寫，中期項目實施，進度匯報，后期項目維護。
大數(shù)據(jù)架構(gòu)師的具體職責(zé) 篇25
職責(zé)：
1、負責(zé)大數(shù)據(jù)平臺技術(shù)框架的技術(shù)選型和搭建;
2、負責(zé)核心技術(shù)問題公關(guān)，建設(shè)高可靠性，擴展性及高性能大數(shù)據(jù)/數(shù)據(jù)應(yīng)用平臺;
3、負責(zé)規(guī)劃數(shù)據(jù)挖掘的整體流程，負責(zé)大數(shù)據(jù)開發(fā)團隊業(yè)務(wù)需求開發(fā);
4、與其他團隊密切配合，尋求數(shù)據(jù)層面的業(yè)務(wù)價值，利用數(shù)據(jù)分析結(jié)論推動產(chǎn)品優(yōu)化;
5、研究和分享大數(shù)據(jù)架構(gòu)領(lǐng)域新技術(shù)。
任職要求：
1、計算機相關(guān)專業(yè)全日制統(tǒng)招本科及以上;
2、5年以上工作經(jīng)驗，至少3年以上大數(shù)據(jù)項目相關(guān)工作經(jīng)驗，能夠設(shè)計大型大數(shù)據(jù)系統(tǒng)的架構(gòu)和技術(shù)方案;
3、精通Hadoop/Spark/Hbase/Hive等大數(shù)據(jù)技術(shù),精通ETL技術(shù);
4、熟悉數(shù)據(jù)挖掘，了解典型大數(shù)據(jù)算法和策略;
5、熟悉主流Java技術(shù)框架，精通關(guān)系型數(shù)據(jù)庫及SQL語言，熟悉NoSQL/JSON/XML;
6、有較強的學(xué)習(xí)能力和問題解決能力，邏輯嚴密、思路清晰;
7、有數(shù)據(jù)倉庫經(jīng)驗者優(yōu)先，有金融行業(yè)項目經(jīng)驗者優(yōu)先。
大數(shù)據(jù)架構(gòu)師的具體職責(zé) 篇26
職責(zé)：
負責(zé)公司大數(shù)據(jù)產(chǎn)品架構(gòu)的設(shè)計與實現(xiàn);
配合大數(shù)據(jù)產(chǎn)品經(jīng)理完成產(chǎn)品的快速研發(fā)與交付;
負責(zé)大數(shù)據(jù)產(chǎn)品架構(gòu)的持續(xù)優(yōu)化設(shè)計;
負責(zé)大數(shù)據(jù)產(chǎn)品核心組件設(shè)計;
負責(zé)大數(shù)據(jù)相關(guān)數(shù)據(jù)架構(gòu)規(guī)劃、數(shù)據(jù)建模、數(shù)據(jù)庫設(shè)計以及大數(shù)據(jù)產(chǎn)品研發(fā)工作;
為應(yīng)用開發(fā)團隊提供技術(shù)支撐。
及時向上級反饋工作進度、遇到的問題或者對現(xiàn)有工作的建議等;
完成上級領(lǐng)導(dǎo)交辦的其它各項工作。
任職資格：
985/211本科及以上學(xué)歷，3年以上的大數(shù)據(jù)開發(fā)經(jīng)驗、
2年以上大數(shù)據(jù)架構(gòu)設(shè)計經(jīng)驗;
豐富的JAVA研發(fā)經(jīng)驗，精通JAVA，熟悉Python Scala等編程語言;具備深厚的分布式系統(tǒng)或數(shù)據(jù)庫系統(tǒng)的理論基礎(chǔ)，熟悉分布式計算系統(tǒng)的工作機制，具有分布式文件系統(tǒng)、分布式數(shù)據(jù)庫系統(tǒng)、集群存儲系統(tǒng)等架構(gòu)設(shè)計經(jīng)驗;
熟悉整個大數(shù)據(jù)的完整處理流程(數(shù)據(jù)的采集、清洗、預(yù)處理、存儲、分析挖掘、機器學(xué)習(xí)和數(shù)據(jù)可視化);
精通各種大數(shù)據(jù)相關(guān)技術(shù)體系：Hadoop、Spark、Storm、ElasticSearch、Kafka;
有數(shù)據(jù)挖掘、機器學(xué)習(xí)相關(guān)應(yīng)用或研究背景;
溝通能力較好，積極主動意識較強，責(zé)任心較強。
具備優(yōu)秀的邏輯思維能力，對解決挑戰(zhàn)性問題充滿熱情，善于解決問題和分析問題;
良好的團隊合作精神，較強的溝通能力和學(xué)習(xí)能力 ;
大數(shù)據(jù)架構(gòu)師的具體職責(zé) 篇27
職責(zé):
1、負責(zé)自然語音交互、IOT家電物聯(lián)控制、知識圖譜等相關(guān)模塊和系統(tǒng)的開發(fā);
2、負責(zé)掌握第三方接口的調(diào)用和功能實現(xiàn)，持續(xù)優(yōu)化服務(wù)性能和容量，并保證產(chǎn)品的兼容性和執(zhí)行效率;
3、根據(jù)設(shè)計文檔和需求說明完成代碼編寫、調(diào)試、單元測試與維護，確保項目進度和質(zhì)量;
4、協(xié)助制定測試計劃，及時發(fā)現(xiàn)并修復(fù)BUG，實現(xiàn)服務(wù)端的性能優(yōu)化。
任職資格:
1、大學(xué)本科3年以上工作經(jīng)驗，計算機相關(guān)專業(yè);
2、熟悉軟件項目開發(fā)流程，具有良好編碼風(fēng)格及文檔編寫能力;
3、熟悉Linux服務(wù)器相關(guān)技術(shù)，能夠獨立完成服務(wù)器部署，具有相關(guān)經(jīng)驗;
4、熟悉Hadoop/Spark框架，JAVA基礎(chǔ)扎實;
5、熟練使用Mysql數(shù)據(jù)庫，了解MongoDB或neo4j等分布式數(shù)據(jù)庫;
6、熟悉SpringCloud,SSM,Docker,redis開發(fā)者優(yōu)先;
7、熟悉前端(包括但不限于Html5、css、Angularjs、ajax、jquery等)開發(fā)技術(shù)優(yōu)先;
8、了解Socket網(wǎng)絡(luò)編程、MQTT等，有相應(yīng)實踐經(jīng)驗者優(yōu)先;
9、有智能語音語義、知識圖譜服務(wù)端開發(fā)經(jīng)驗者優(yōu)先。
大數(shù)據(jù)架構(gòu)師的具體職責(zé) 篇28
職責(zé)：
(1) 負責(zé)公司大數(shù)據(jù)平臺搭建，相關(guān)的設(shè)計和技術(shù)開發(fā)工作，負責(zé)大數(shù)據(jù)存儲系統(tǒng)、分布式計算系統(tǒng)、數(shù)據(jù)集成、挖掘算法等的設(shè)計、研發(fā)以及維護、優(yōu)化工作;
(2) 通過數(shù)據(jù)分析技術(shù)，挖掘有利于營銷中各業(yè)務(wù)場景的變量或規(guī)則類標(biāo)簽，以提升模型效果，為文旅、教育業(yè)務(wù)提供數(shù)學(xué)模型理論及編程支撐;
(3) 對接溝通業(yè)務(wù)系統(tǒng)研發(fā)團隊和產(chǎn)品部門，提供數(shù)據(jù)驅(qū)動方面的專業(yè)咨詢方案，并對業(yè)務(wù)的大數(shù)據(jù)應(yīng)用場景提出建設(shè)性意見;
(4) 配合部門領(lǐng)導(dǎo)進行項目需求分析、設(shè)計開發(fā)工作。
任職要求：
(1) 計算機、統(tǒng)計學(xué)，數(shù)學(xué)等相關(guān)專業(yè)本科以上學(xué)歷，5年以上大數(shù)據(jù)或文旅、教育數(shù)據(jù)產(chǎn)品設(shè)計開發(fā)經(jīng)驗，高效高質(zhì)量產(chǎn)出需求和技術(shù)文檔;
(2) 精通Hadoop，熟悉大數(shù)據(jù)生態(tài)技術(shù)，如Storm、Spark、Scala、Flume、Kafka、Zookeeper、Hive、Hbase、Kerberos等，有大規(guī)模集群架構(gòu)、開發(fā)及運維經(jīng)驗;熟悉HDFS/MapReduce等;
(3) 熟悉Java，能夠獨立應(yīng)用python、R、SAS或類似分析工具進行數(shù)據(jù)分析;
(4) 熟悉大數(shù)據(jù)挖掘、可視化分析，各種BI算法和產(chǎn)品等，在計算廣告、搜索引擎、推薦系統(tǒng)、用戶畫像等有一個或多個算法領(lǐng)域的研發(fā)經(jīng)驗，能夠運用數(shù)據(jù)作為產(chǎn)品解決業(yè)務(wù)方運營及決策問題;
(5) 有互聯(lián)網(wǎng)行業(yè)工作經(jīng)驗者優(yōu)先，有海量數(shù)據(jù)的機器學(xué)習(xí)算法實踐經(jīng)驗優(yōu)先;
(6) 工作認真、負責(zé)，有良好的團隊合作精神，良好的分析能力、溝通技巧。
大數(shù)據(jù)架構(gòu)師的具體職責(zé) 篇29
1.負責(zé)大數(shù)據(jù)平臺的基礎(chǔ)技術(shù)規(guī)劃，編制相關(guān)規(guī)范文檔。
2.負責(zé)大數(shù)據(jù)平臺的數(shù)據(jù)采集，處理，存儲以及挖掘分析的架構(gòu)實現(xiàn)。
3.負責(zé)大數(shù)據(jù)平臺的實際規(guī)劃建設(shè)，包括環(huán)境和框架的規(guī)劃搭建以及部分核心編碼工作。
4.負責(zé)大數(shù)據(jù)相關(guān)技術(shù)發(fā)展方向的預(yù)研。
5.參與業(yè)務(wù)需求調(diào)研，根據(jù)需求及行業(yè)特點設(shè)計大數(shù)據(jù)解決方案并跟進具體實施項目。
6.制定大數(shù)據(jù)平臺中數(shù)據(jù)質(zhì)量，業(yè)務(wù)質(zhì)量監(jiān)控及管理辦法。
大數(shù)據(jù)架構(gòu)師的具體職責(zé) 篇30
職責(zé)：
1. 負責(zé)產(chǎn)品級業(yè)務(wù)系統(tǒng)架構(gòu)(如業(yè)務(wù)數(shù)據(jù)對象識別，數(shù)據(jù)實體、數(shù)據(jù)屬性分析，數(shù)據(jù)標(biāo)準(zhǔn)、端到端數(shù)據(jù)流等)的設(shè)計與優(yōu)化。協(xié)助推動跨領(lǐng)域重大數(shù)據(jù)問題的分析、定位、解決方案設(shè)計，從架構(gòu)設(shè)計上保障系統(tǒng)高性能、高可用性、高安全性、高時效性、分布式擴展性，并對系統(tǒng)質(zhì)量負責(zé)。
2.負責(zé)云數(shù)據(jù)平臺的架構(gòu)設(shè)計和數(shù)據(jù)處理體系的優(yōu)化，推動云數(shù)據(jù)平臺建設(shè)和持續(xù)升級，并制定云數(shù)據(jù)平臺調(diào)用約束和規(guī)范。
3. 結(jié)合行業(yè)應(yīng)用的需求負責(zé)數(shù)據(jù)流各環(huán)節(jié)上的方案選型，主導(dǎo)云數(shù)據(jù)平臺建設(shè)，參與核心代碼編寫、審查;數(shù)據(jù)的統(tǒng)計邏輯回歸算法、實時交互分析;數(shù)據(jù)可視化方案等等的選型、部署、集成融合等等。
4. 對云數(shù)據(jù)平臺的關(guān)注業(yè)內(nèi)技術(shù)動態(tài)，持續(xù)推動平臺技術(shù)架構(gòu)升級，以滿足公司不同階段的數(shù)據(jù)需求。
任職要求：
1. 熟悉云計算基礎(chǔ)平臺，包括 Linux(Ubuntu/CentOS)和 KVM、OpenStack/K8S 等基礎(chǔ)環(huán)境，熟悉控制、計算、存儲和網(wǎng)絡(luò);
2. 掌握大型分布式系統(tǒng)的技術(shù)棧，如：CDN、負載均衡、服務(wù)化/異步化、分布式緩存、NoSQL、數(shù)據(jù)庫垂直及水平擴容;熟悉大數(shù)據(jù)應(yīng)用端到端的相關(guān)高性能產(chǎn)品。
3. 精通 Java，Python，Shell 編程語言，精通 SQL、NoSQL 等數(shù)據(jù)庫增刪改查的操作優(yōu)化;
4. PB 級別實戰(zhàn)數(shù)據(jù)平臺和生產(chǎn)環(huán)境的實施、開發(fā)和管理經(jīng)驗;
5. 熟悉 Docker 等容器的編排封裝，熟悉微服務(wù)的開發(fā)和日常調(diào)度;
6.計算機、軟件、電子信息及通信等相關(guān)專業(yè)本科以上學(xué)歷，5 年以上軟件工程開發(fā)經(jīng)驗，2 年以上大數(shù)據(jù)架構(gòu)師工作經(jīng)驗。