大數(shù)據(jù)開發(fā)工程師的職責文本精選
大數(shù)據(jù)開發(fā)工程師的職責文本精選
大數(shù)據(jù)開發(fā)工程師需要處理公司大數(shù)據(jù)平臺產(chǎn)品的技術(shù)工作，包括存儲、處理、分析、挖掘、架構(gòu)設(shè)計、研發(fā)工作。下面是學(xué)習(xí)啦小編整理的大數(shù)據(jù)開發(fā)工程師的職責文本精選。
大數(shù)據(jù)開發(fā)工程師的職責文本精選1
職責：
1、負責該領(lǐng)域的業(yè)務(wù)需求討論，完成技術(shù)方案及數(shù)據(jù)開發(fā);
2、負責數(shù)據(jù)倉庫的體系建設(shè)及落地實現(xiàn);
3、負責大數(shù)據(jù)平臺各類環(huán)境的部署及運維、并參與架構(gòu)優(yōu)化、性能優(yōu)化等工作;
4、負責該領(lǐng)域所屬模塊的代碼開發(fā)、調(diào)試與維護工作，并進行技術(shù)沉淀和文檔輸出。
招聘要求：
1、計算機、電子通信、自動化等專業(yè)，本科及以上學(xué)歷;
2、五年以上研發(fā)經(jīng)驗，其中二年以上大數(shù)據(jù)開發(fā)的相關(guān)工作經(jīng)驗;
3、熟練JAVA開發(fā)語言;熟悉微服務(wù)及Spring框架;
4、熟練熟練Hive、Impala、ES性能調(diào)優(yōu)，關(guān)注細節(jié)，學(xué)習(xí)能力強;
5、能配合團隊完成該領(lǐng)域的工作，自我管理能力強，能承受工作中的各種壓力，具備很好的團隊意識
6、熟練主流大數(shù)據(jù)平臺產(chǎn)品部署及運維，如CDH、HDP平臺。
7、對機器學(xué)習(xí)和深度學(xué)習(xí)等方面有一定的了解;
8、有汽車制造業(yè)及相關(guān)行業(yè)的大數(shù)據(jù)開發(fā)經(jīng)驗優(yōu)先。
大數(shù)據(jù)開發(fā)工程師的職責文本精選2
職責：
1、負責數(shù)據(jù)中心和大數(shù)據(jù)處理平臺的搭建
2、在線和離線海量數(shù)據(jù)分析平臺的開發(fā);
3、研究大數(shù)據(jù)前沿技術(shù)，提升系統(tǒng)的運維效率;
4、參與大數(shù)據(jù)的采集、存儲、處理，分析等開發(fā)
5、參與數(shù)據(jù)挖掘算法的設(shè)計、對海量數(shù)據(jù)進行挖掘分析和發(fā)掘數(shù)據(jù)價值及算法學(xué)習(xí)及實現(xiàn)
【任職要求】：
1、計算機或相關(guān)專業(yè)本科學(xué)歷及以上，2年工作經(jīng)驗以上
2、熟悉Java/Scala等至少一門語言，能對分布式常用技術(shù)進行合理應(yīng)用，解決實際架構(gòu)問題
3、熟練使用hadoop，hive，HBase，YARN，kafka，spark，Storm,Flume等大數(shù)據(jù)開發(fā)組件
4、熟悉整個大數(shù)據(jù)的完整處理流程，包括數(shù)據(jù)的采集、清洗、存儲、分析和可視化及報表開發(fā);
5、熟悉分布式系統(tǒng)概念、架構(gòu)，有大規(guī)模分布式系統(tǒng)設(shè)計、實現(xiàn)、部署等經(jīng)驗;
6. 具有優(yōu)秀的學(xué)習(xí)能力、獨立分析和解決問題能力，良好的團隊合作精神。
7. 有BI開發(fā)經(jīng)驗的優(yōu)化考慮。
大數(shù)據(jù)開發(fā)工程師的職責文本精選3
職責：
1.結(jié)合項目或產(chǎn)品涉及的具體業(yè)務(wù)場景，對數(shù)據(jù)進行清洗、計算與加工;
2.思路清晰，可快速響應(yīng)數(shù)據(jù)處理的需求，評估并給出合理的解決方案，并采用合理的方式處理需求;
3.積極主動，能夠與團隊成員進行有效溝通，并完成數(shù)據(jù)處理結(jié)果的核對與對接;
4.完成上級交辦的工作或任務(wù)。
崗位要求
1.計算機相關(guān)專業(yè)大專以上學(xué)歷;
2.2年以上大數(shù)據(jù)產(chǎn)品或項目開發(fā)經(jīng)驗，精通Hadoop生態(tài)圈，熟練使用Spark，HBase、Hive、Kafka、Redis等;
3.精通SQL，熟練使用HSQL實現(xiàn)復(fù)雜數(shù)據(jù)處理邏輯，并具備數(shù)據(jù)處理調(diào)優(yōu)的能力;
4.熟悉Linux開發(fā)環(huán)境，熟悉Linux的shell命令。
5.具有良好的邏輯思維能力和嚴謹?shù)某绦蜷_發(fā)思想，具備獨立問題排查與處理的能力;
6.良好的團隊精神和合作意識，強烈的責任心，對工作有激情，良好的溝通能力，能吃苦耐勞;
7.有大數(shù)據(jù)項目或產(chǎn)品背景者優(yōu)先;
8.有使用Spark SQL進行數(shù)據(jù)處理，并具有Spark SQL優(yōu)化經(jīng)驗者優(yōu)先。
9.有Python或者Shell腳本開發(fā)經(jīng)驗優(yōu)先
大數(shù)據(jù)開發(fā)工程師的職責文本精選4
職責：
1、負責數(shù)據(jù)采集、數(shù)據(jù)存儲、數(shù)據(jù)查詢、數(shù)據(jù)計算等基礎(chǔ)平臺的設(shè)計和開發(fā)工作;
2、利用Hadoop、Spark、Flink等技術(shù)進行離線和實時數(shù)據(jù)開發(fā) ;
3、負責大數(shù)據(jù)平臺的規(guī)劃升級、平臺維護和優(yōu)化 ;
4、和其他部門或團隊溝通、資源協(xié)調(diào)并落實工作。
任職要求
1、本科及以上學(xué)歷;
2、3年以上大型大數(shù)據(jù)平臺建設(shè)實施經(jīng)驗 ;
3、掌握常用大數(shù)據(jù)組件hadoop、Hive、spark、Flink、hbase、elasticsearch等原理、使用和調(diào)優(yōu) ;
4、具備較強技術(shù)功底，精通Java、Scala、Python等至少一種開發(fā)語言，能根據(jù)需求給出技術(shù)架構(gòu) ;
5、有數(shù)據(jù)倉庫、元數(shù)據(jù)管理和治理的開發(fā)經(jīng)驗優(yōu)先 ;
6、善于溝通，思維活躍、責任感強、工作積極主動，有良好的團隊協(xié)作意識。
大數(shù)據(jù)開發(fā)工程師的職責文本精選5
職責：
1、負責完成業(yè)務(wù)和產(chǎn)品的對接，支持業(yè)務(wù)需求研發(fā);
2、負責完成產(chǎn)品的迭代升級以及底層架構(gòu)的升級研發(fā);
3、完成團隊安排的其他相關(guān)日常工作任職要求;
4、負責產(chǎn)品的實時業(yè)務(wù)和離線業(yè)務(wù)的研發(fā);
5、支持開源大數(shù)據(jù)技術(shù)在數(shù)據(jù)系統(tǒng)中的使用，修復(fù)、優(yōu)化增強大數(shù)據(jù)技術(shù);
崗位要求：
1、具有分布式系統(tǒng)架構(gòu)開發(fā)能力，熟練使用storm、spark hbase者優(yōu)先。
2、能夠使用實時計算平臺，進行實時業(yè)務(wù)數(shù)據(jù)的研發(fā)。
3、能夠基于已有平臺進行離線業(yè)務(wù)的開發(fā)。
4、有大數(shù)據(jù)應(yīng)用產(chǎn)品研發(fā)經(jīng)驗，具有數(shù)據(jù)決策產(chǎn)品研發(fā)經(jīng)驗者優(yōu)先。
相關(guān)文章：