大數(shù)據(jù)開發(fā)工程師崗位的工作職責說明
大數(shù)據(jù)開發(fā)工程師崗位的工作職責說明
大數(shù)據(jù)開發(fā)工程師負責大數(shù)據(jù)平臺及應(yīng)用場景的構(gòu)建、部署、測試。以下是學習啦小編整理的大數(shù)據(jù)開發(fā)工程師崗位的工作職責說明。
大數(shù)據(jù)開發(fā)工程師崗位的工作職責說明1
職責：
1、負責基于Hadoop框架的海量數(shù)據(jù)平臺建設(shè)
2、參與大數(shù)據(jù)平臺的數(shù)據(jù)架構(gòu)設(shè)計，完成從業(yè)務(wù)模型到數(shù)據(jù)模型的設(shè)計
3、基于海量數(shù)據(jù)的數(shù)據(jù)倉庫，為業(yè)務(wù)搭建通用的查詢和分析解決方案
4、管理并優(yōu)化存儲&計算資源利用效率、監(jiān)控并維護例行ETL任務(wù)
5、梳理整體業(yè)務(wù)指標，可視化報表開發(fā)
應(yīng)聘要求：
1、計算機本科及以上學歷，5年以上大型數(shù)據(jù)倉庫架構(gòu)設(shè)計、模型設(shè)計、ETL設(shè)計相關(guān)經(jīng)驗
2、熟悉Hadoop生態(tài)，熟悉Oracle、SQL數(shù)據(jù)庫中的一個或多個，有一定的性能優(yōu)化經(jīng)驗
3、熟練掌握Java語言，MapReduce編程，Python/Shell等腳本語言，Linux操作系統(tǒng)
4、具備大數(shù)據(jù)云平臺、計算存儲平臺、可視化開發(fā)平臺經(jīng)驗
5、業(yè)務(wù)理解力強，對數(shù)據(jù)敏感，有互聯(lián)網(wǎng)行業(yè)產(chǎn)品數(shù)據(jù)分析經(jīng)驗者優(yōu)先
大數(shù)據(jù)開發(fā)工程師崗位的工作職責說明2
職責：
1、根據(jù)工作安排高效、高質(zhì)地完成代碼編寫，確保符合規(guī)范的前端代碼規(guī)范;
2、負責公司現(xiàn)有項目和新項目的前端修改調(diào)試和開發(fā)工作;
3、與設(shè)計團隊緊密配合，能夠?qū)崿F(xiàn)實現(xiàn)設(shè)計師的設(shè)計想法;
4、與后端開發(fā)團隊緊密配合，確保代碼有效對接，優(yōu)化網(wǎng)站前端性能;
5、頁面通過標準校驗，兼容各主流瀏覽器。
任職要求:
1. 本科及以上學歷，熟悉j2ee，精通web開發(fā)有5年工作經(jīng)驗以上(學習能力好放寬至4年)，熟悉jsp，spring框架;
2.悉主流移動web開發(fā)框架,并有過實際項目開發(fā)經(jīng)驗;
3.有kylin,atlas,oozie,azkaban,spark,ranger任意一種使用項目使用經(jīng)驗。
大數(shù)據(jù)開發(fā)工程師崗位的工作職責說明3
職責：
1、負責公司大數(shù)據(jù)基礎(chǔ)平臺產(chǎn)品開發(fā)工作;
2、完成產(chǎn)品/項目劃分的研發(fā)任務(wù)，按需求規(guī)范進行研發(fā);
3、具備良好的需求分析能力、業(yè)務(wù)建模能力，參與產(chǎn)品和項目相關(guān)模塊的需求討論，概要、詳細設(shè)計;
4、具備良好的架構(gòu)分析能力與設(shè)計能力，積極參與前期設(shè)計;
5、能根據(jù)設(shè)計方案和計劃進行編碼實現(xiàn)，在進度和質(zhì)量上符合方案和計劃的要求;
6、及時對BUG庫中的軟件問題進行跟蹤修正。
崗位要求：
1、三年以上工作經(jīng)驗，一年以上大數(shù)據(jù)平臺架構(gòu)及ETL相關(guān)經(jīng)驗，可獨立搭建/運維CDH/Spark整套平臺架構(gòu);
2、精通Python/Java/Scala/SQL/Shell等語言中兩種以上，熟悉Spark/Hadoop/Hive/MR/Hbase/ZK/YARN等三種以上開源框架的原理和源碼;
3、熟悉容器平臺開發(fā)或者開發(fā)優(yōu)先考慮，有docker、kubernetes相關(guān)開發(fā)經(jīng)驗更佳;
4、學習能力強，適應(yīng)能力好，有豐富的問題原因定位及運維技術(shù)支持經(jīng)驗;
5、有市場上成熟的大數(shù)據(jù)平臺產(chǎn)品實際架構(gòu)/開發(fā)經(jīng)驗優(yōu)先。
大數(shù)據(jù)開發(fā)工程師崗位的工作職責說明4
職責：
1. 負責公司大數(shù)據(jù)業(yè)務(wù)集群的運維工作確保高可用;
2. 負責基礎(chǔ)運維、故障定位、容量規(guī)劃、擴容及性能優(yōu)化;
3. 設(shè)計實現(xiàn)大規(guī)模分布式集群的運維、報警監(jiān)控和管理平臺;
4. 參與業(yè)務(wù)架構(gòu)設(shè)計，在設(shè)計階段給出可運維性改進建議;
5. 深入研究大數(shù)據(jù)業(yè)務(wù)相關(guān)運維技術(shù)，持續(xù)優(yōu)化集群服務(wù)架構(gòu)，探索新的大數(shù)據(jù)運維技術(shù)及發(fā)展方向。
任職資格：
1.大專以上學歷，2年及以上大數(shù)據(jù)運維工作經(jīng)驗，熟悉hadoop/hbase/hive/Yarn/Spark等分布式相關(guān)技術(shù)，熟悉源碼尤佳，至少掌握python/shell中的一種語言，接受優(yōu)秀應(yīng)屆畢業(yè)生;
2.了解大數(shù)據(jù)平臺應(yīng)用架構(gòu)，具備常見問題的基本分析和解決能力;
3.熟悉Linux操作系統(tǒng)的配置、管理及優(yōu)化，能夠獨立排查及解決操作系統(tǒng)層面的問題;
4.熟悉nginx/emq/tomca、mysql/mongodb/redis等web應(yīng)用/中間件及主流開源數(shù)據(jù)庫的使用和配置。
大數(shù)據(jù)開發(fā)工程師崗位的工作職責說明5
職責：
1、負責公司c端產(chǎn)品以及廣告數(shù)據(jù)的平臺數(shù)據(jù)基礎(chǔ)建設(shè);
2、大數(shù)據(jù)平臺的搭建與維護;
3、優(yōu)化算法提高執(zhí)行效率;
4、數(shù)據(jù)挖掘相關(guān)開發(fā)。
職位要求：
1. 本科及以上，計算機、軟件工程、統(tǒng)計學、數(shù)據(jù)挖掘、機器學習等相關(guān)專業(yè);
2. 熟悉JAVA語言及JAVA生態(tài)下的開發(fā),了解多線程并發(fā),能獨立完成應(yīng)用開發(fā)和部署;
3. 3年及以上大數(shù)據(jù)流程架構(gòu)經(jīng)驗，熟悉Hbase/Hive/Hadoop/Spark或等主流分布式開發(fā)平臺，有高性能集群設(shè)計和開發(fā)經(jīng)驗;
4. 能熟練操作Linux,熟練掌握SQL數(shù)據(jù)庫語言 HiveSQL/Mysql/Sqlserver;
5. 對有廣告營銷大數(shù)據(jù)算法/開發(fā)經(jīng)驗者優(yōu)先，有大型數(shù)據(jù)項目經(jīng)驗優(yōu)先，有用戶行為分析、用戶建模、業(yè)務(wù)建模經(jīng)驗者優(yōu)先;
6. 具有良好的邏輯分析能力、溝通能力和協(xié)調(diào)能力;
相關(guān)文章：