大數(shù)據(jù)架構(gòu)師的工作職責描述

　　大數(shù)據(jù)架構(gòu)師需要負責公司大數(shù)據(jù)產(chǎn)品的架構(gòu)設(shè)計，包含數(shù)據(jù)收集、數(shù)據(jù)存儲、數(shù)據(jù)應(yīng)用，并完成相關(guān)架構(gòu)設(shè)計文檔的撰寫。下面是學習啦小編為您精心整理的大數(shù)據(jù)架構(gòu)師的工作職責描述。

　　大數(shù)據(jù)架構(gòu)師的工作職責描述1

　　職責：

　　1、 基于公司大數(shù)據(jù)基礎(chǔ)和數(shù)據(jù)資產(chǎn)積累，負責大數(shù)據(jù)應(yīng)用整體技術(shù)架構(gòu)的設(shè)計、優(yōu)化，建設(shè)大數(shù)據(jù)能力開放平臺;負責大數(shù)據(jù)應(yīng)用產(chǎn)品的架構(gòu)設(shè)計、技術(shù)把控工作。

　　2、 負責制定大數(shù)據(jù)應(yīng)用系統(tǒng)的數(shù)據(jù)安全管控體系和數(shù)據(jù)使用規(guī)范。

　　3、 作為大數(shù)據(jù)技術(shù)方案到產(chǎn)品實現(xiàn)的技術(shù)負責人，負責關(guān)鍵技術(shù)點攻堅工作，負責內(nèi)部技術(shù)推廣、培訓(xùn)及知識轉(zhuǎn)移工作。

　　4、 負責大數(shù)據(jù)系統(tǒng)研發(fā)項目任務(wù)規(guī)劃、整體進度、風險把控，有效協(xié)同團隊成員并組織跨團隊技術(shù)協(xié)作，保證項目質(zhì)量與進度。

　　5、 負責提升產(chǎn)品技術(shù)團隊的技術(shù)影響力，針對新人、普通開發(fā)人員進行有效輔導(dǎo)，幫助其快速成長。

　　任職資格：

　　1、 計算機、數(shù)學或相關(guān)專業(yè)本科以上學歷，5-10年工作經(jīng)驗，具有大型系統(tǒng)的技術(shù)架構(gòu)\應(yīng)用架構(gòu)\數(shù)據(jù)架構(gòu)相關(guān)的實踐工作經(jīng)驗。

　　2、 有分布式系統(tǒng)分析及架構(gòu)設(shè)計經(jīng)驗，熟悉基于計算集群的軟件系統(tǒng)架構(gòu)和實施經(jīng)驗。

　　3、 掌握Hadoop/Spark/Storm生態(tài)圈的主流技術(shù)及產(chǎn)品，深入了解Hadoop/Spark/Storm生態(tài)圈產(chǎn)品的工作原理及應(yīng)用場景。

　　4、 掌握Mysql/Oracle等常用關(guān)系型數(shù)據(jù)庫，能夠?qū)QL進行優(yōu)化。

　　5、 熟悉分布式系統(tǒng)基礎(chǔ)設(shè)施中常用的技術(shù)，如緩存(Varnish、Memcache、Redis)、消息中間件(Rabbit MQ、Active MQ、Kafka、NSQ)等;有實踐經(jīng)驗者優(yōu)先。

　　6、 熟悉Linux，Java基礎(chǔ)扎實，至少3-5年以上Java應(yīng)用開發(fā)經(jīng)驗，熟悉常用的設(shè)計模式和開源框架。

　　大數(shù)據(jù)架構(gòu)師的工作職責描述2

　　職責：

　　1、負責面向政府信領(lǐng)域的企業(yè)(不限于)大數(shù)據(jù)平臺、大數(shù)據(jù)應(yīng)用等系統(tǒng)的架構(gòu)設(shè)計、技術(shù)規(guī)劃、技術(shù)選型

　　2、跟進業(yè)界大數(shù)據(jù)技術(shù)發(fā)展動態(tài)，匹配行業(yè)應(yīng)用訴求，制定大數(shù)據(jù)策略，提前識別關(guān)鍵技術(shù)并完成技術(shù)驗證;

　　3、支撐售前完成項目解決方案技術(shù)架構(gòu)的設(shè)計及重要客戶的交流;

　　4、負責指導(dǎo)研發(fā)完成大數(shù)據(jù)產(chǎn)品的開發(fā)

　　5、帶領(lǐng)團隊進行產(chǎn)品核心技術(shù)的創(chuàng)新和積累

　　崗位要求：

　　1、熟悉BI和大數(shù)據(jù)領(lǐng)域的解決方案，具備該領(lǐng)域全面的技術(shù)積累，包括報表平臺，OLAP引擎和DB，ETL，數(shù)據(jù)倉庫建模和設(shè)計，海量分布式數(shù)據(jù)處理分析架構(gòu);

　　2、在大數(shù)據(jù)處理和分析領(lǐng)域具有3年或者以上的技術(shù)規(guī)劃、架構(gòu)設(shè)計經(jīng)驗，并有成功的項目實踐;

　　3、4年以上Hadoop實戰(zhàn)經(jīng)驗，熟悉Hadoop底層文件系統(tǒng)及分布式計算框架，具備傳統(tǒng)數(shù)據(jù)倉庫、MPP、Hadoop等混搭平臺架構(gòu)的設(shè)計能力和數(shù)據(jù)建模能力，對大規(guī)模數(shù)據(jù)并行計算、傳輸、處理等有豐富的經(jīng)驗;

　　4、有實際應(yīng)用storm、spark、flume、kafka等項目經(jīng)驗優(yōu)先;

　　5、卓越的技術(shù)領(lǐng)導(dǎo)力，善于溝通、發(fā)現(xiàn)和解決產(chǎn)品需求階段、開發(fā)階段和測試階段的問題，并能提供合理解決方案，有大中型互聯(lián)網(wǎng)企業(yè)工作背景優(yōu)先。

　　大數(shù)據(jù)架構(gòu)師的工作職責描述3

　　職責：

　　1、負責公司大數(shù)據(jù)平臺架構(gòu)的技術(shù)選型和技術(shù)難點攻關(guān)工作;

　　2、依據(jù)行業(yè)數(shù)據(jù)現(xiàn)狀和客戶需求，完成行業(yè)大數(shù)據(jù)的特定技術(shù)方案設(shè)計與撰寫;

　　3、負責研究跟進大數(shù)據(jù)架構(gòu)領(lǐng)域新興技術(shù)并在公司內(nèi)部進行分享;

　　4、參與公司大數(shù)據(jù)項目的技術(shù)交流、解決方案定制以及項目的招投標工作;

　　5、參與公司大數(shù)據(jù)項目前期的架構(gòu)設(shè)計工作;

　　任職要求：

　　1、計算機及相關(guān)專業(yè)本科以上，5年以上數(shù)據(jù)類項目(數(shù)據(jù)倉庫、商務(wù)智能)實施經(jīng)驗，至少2年以上大數(shù)據(jù)架構(gòu)設(shè)計和開發(fā)經(jīng)驗，至少主導(dǎo)過一個大數(shù)據(jù)平臺項目架構(gòu)設(shè)計;

　　2、精通大數(shù)據(jù)生態(tài)圈的技術(shù)，包括但不限于MapReduce、Spark、Hadoop、Kafka、Mongodb、Redis、Flume、Storm、Hbase、Hive，具備數(shù)據(jù)統(tǒng)計查詢性能優(yōu)化能力。熟悉星環(huán)大數(shù)據(jù)產(chǎn)品線及有過產(chǎn)品項目實施經(jīng)驗者優(yōu)先;

　　3、優(yōu)秀的方案撰寫能力，思路清晰，邏輯思維強，能夠根據(jù)業(yè)務(wù)需求設(shè)計合理的解決方案;

　　4、精通ORACLE、DB2、mySql等主流關(guān)系型數(shù)據(jù)庫，熟悉數(shù)據(jù)倉庫建設(shè)思路和數(shù)據(jù)分層架構(gòu)思想;

　　5. 熟練掌握java、R、python等1-2門數(shù)據(jù)挖掘開發(fā)語言;

　　6. 熟悉云服務(wù)平臺及微服務(wù)相關(guān)架構(gòu)思想和技術(shù)路線，熟悉阿里云或騰訊云產(chǎn)品者優(yōu)先;

　　7、有煙草或制造行業(yè)大數(shù)據(jù)解決方案售前經(jīng)驗者優(yōu)先;

　　8、能適應(yīng)售前支持和項目實施需要的短期出差;

　　大數(shù)據(jù)架構(gòu)師的工作職責描述4

　　職責：

　　1、負責規(guī)劃大數(shù)據(jù)平臺及應(yīng)用產(chǎn)品的需求和技術(shù)方案設(shè)計;

　　2、負責數(shù)據(jù)對接和對外服務(wù)設(shè)計、開發(fā)和維護，并能保證質(zhì)量和性能;

　　3、負責基于大數(shù)據(jù)平臺的應(yīng)用設(shè)計、開發(fā)和維護;

　　4、能從系統(tǒng)全局和各子系統(tǒng)的角度思考可能存在的問題，并提出改進方案建議;

　　任職要求：

　　1、大學本科6年以上工作經(jīng)驗，計算機相關(guān)專業(yè)。

　　2、至少4年以上的Java開發(fā)經(jīng)驗，3年以上大數(shù)據(jù)應(yīng)用系統(tǒng)的開發(fā)和設(shè)計經(jīng)驗。

　　3、熟悉Hadoop生態(tài)圈技術(shù)體系， 對離線計算、內(nèi)存計算和流式計算均有深刻理解， 如Hadoop、Storm、Spark三個中的任意二個， 能進行平臺和組件優(yōu)化。

　　4、精通Hive、HBase倉庫設(shè)計，深刻理解MR運行原理和機制，能進行以提供高任務(wù)執(zhí)行效率的優(yōu)化。

　　5、精通Java開發(fā)，熟悉JVM調(diào)優(yōu)， 對GC有深刻理解。

　　6、熟悉Linux、Shell、Kafka、Oracle、Mysql、Redis等相關(guān)技術(shù)， 能進行hbase可靠性診斷和維護。

　　7、快速研究和學習技術(shù)能力。

　　大數(shù)據(jù)架構(gòu)師的工作職責描述5

　　職責：

　　1、負責相關(guān)開源系統(tǒng)/組件的性能、穩(wěn)定性、可靠性等方面的深度優(yōu)化;

　　2、負責解決項目上線后生產(chǎn)環(huán)境的各種實際問題，保障大數(shù)據(jù)平臺在生產(chǎn)上的安全、平穩(wěn)運行;

　　3、推動優(yōu)化跨部門的業(yè)務(wù)流程， 參與業(yè)務(wù)部門的技術(shù)方案設(shè)計、評審、指導(dǎo);

　　4、負責技術(shù)團隊人員培訓(xùn)、人員成長指導(dǎo)。

　　5、應(yīng)項目要求本月辦公地址在錦江區(qū)金石路316號新希望中鼎國際辦公，月底項目結(jié)束后在總部公司辦公

　　任職要求：

　　1、熟悉linux、JVM底層原理，能作為技術(shù)擔當，解決核心技術(shù)問題;

　　2、3年以上大數(shù)據(jù)平臺項目架構(gòu)或開發(fā)經(jīng)驗，對大數(shù)據(jù)生態(tài)技術(shù)體系有全面了解，如Yarn、Spark、HBase、Hive、Elasticsearch、Kafka、PrestoDB、Phoenix等;

　　3、掌握git、maven、gradle、junit等工具和實踐， 注重文檔管理、注重工程規(guī)范優(yōu)先;

　　4、熟悉Java后臺開發(fā)體系，具備微服務(wù)架構(gòu)的項目實施經(jīng)驗，有Dubbo/Spring cloud微服務(wù)架構(gòu)設(shè)計經(jīng)驗優(yōu)先;

　　5、性格開朗、善于溝通，有極強的技術(shù)敏感性和自我驅(qū)動學習能力，注重團隊意識。