學習啦 > 實用范文 > 辦公文秘 > 崗位職責 > 大數(shù)據(jù)開發(fā)工程師的職責文本精選

大數(shù)據(jù)開發(fā)工程師的職責文本精選

時間: 舒欣1213 分享

大數(shù)據(jù)開發(fā)工程師的職責文本精選

  大數(shù)據(jù)開發(fā)工程師需要處理公司大數(shù)據(jù)平臺產(chǎn)品的技術工作,包括存儲、處理、分析、挖掘、架構設計、研發(fā)工作。下面是學習啦小編整理的大數(shù)據(jù)開發(fā)工程師的職責文本精選。

  大數(shù)據(jù)開發(fā)工程師的職責文本精選1

  職責:

  1、負責該領域的業(yè)務需求討論,完成技術方案及數(shù)據(jù)開發(fā);

  2、負責數(shù)據(jù)倉庫的體系建設及落地實現(xiàn);

  3、負責大數(shù)據(jù)平臺各類環(huán)境的部署及運維、并參與架構優(yōu)化、性能優(yōu)化等工作;

  4、負責該領域所屬模塊的代碼開發(fā)、調試與維護工作,并進行技術沉淀和文檔輸出。

  招聘要求:

  1、計算機、電子通信、自動化等專業(yè),本科及以上學歷;

  2、五年以上研發(fā)經(jīng)驗,其中二年以上大數(shù)據(jù)開發(fā)的相關工作經(jīng)驗;

  3、熟練JAVA開發(fā)語言;熟悉微服務及Spring框架;

  4、熟練熟練Hive、Impala、ES性能調優(yōu),關注細節(jié),學習能力強;

  5、能配合團隊完成該領域的工作,自我管理能力強,能承受工作中的各種壓力,具備很好的團隊意識

  6、熟練主流大數(shù)據(jù)平臺產(chǎn)品部署及運維,如CDH、HDP平臺。

  7、對機器學習和深度學習等方面有一定的了解;

  8、有汽車制造業(yè)及相關行業(yè)的大數(shù)據(jù)開發(fā)經(jīng)驗優(yōu)先。

  大數(shù)據(jù)開發(fā)工程師的職責文本精選2

  職責:

  1、負責數(shù)據(jù)中心和大數(shù)據(jù)處理平臺的搭建

  2、在線和離線海量數(shù)據(jù)分析平臺的開發(fā);

  3、研究大數(shù)據(jù)前沿技術,提升系統(tǒng)的運維效率;

  4、參與大數(shù)據(jù)的采集、存儲、處理,分析等開發(fā)

  5、參與數(shù)據(jù)挖掘算法的設計、對海量數(shù)據(jù)進行挖掘分析和發(fā)掘數(shù)據(jù)價值及算法學習及實現(xiàn)

  【任職要求】:

  1、計算機或相關專業(yè)本科學歷及以上,2年工作經(jīng)驗以上

  2、熟悉Java/Scala等至少一門語言,能對分布式常用技術進行合理應用,解決實際架構問題

  3、熟練使用hadoop,hive,HBase,YARN,kafka,spark,Storm,Flume等大數(shù)據(jù)開發(fā)組件

  4、熟悉整個大數(shù)據(jù)的完整處理流程,包括數(shù)據(jù)的采集、清洗、存儲、分析和可視化及報表開發(fā);

  5、熟悉分布式系統(tǒng)概念、架構,有大規(guī)模分布式系統(tǒng)設計、實現(xiàn)、部署等經(jīng)驗;

  6. 具有優(yōu)秀的學習能力、獨立分析和解決問題能力,良好的團隊合作精神。

  7. 有BI開發(fā)經(jīng)驗的優(yōu)化考慮。

  大數(shù)據(jù)開發(fā)工程師的職責文本精選3

  職責:

  1.結合項目或產(chǎn)品涉及的具體業(yè)務場景,對數(shù)據(jù)進行清洗、計算與加工;

  2.思路清晰,可快速響應數(shù)據(jù)處理的需求,評估并給出合理的解決方案,并采用合理的方式處理需求;

  3.積極主動,能夠與團隊成員進行有效溝通,并完成數(shù)據(jù)處理結果的核對與對接;

  4.完成上級交辦的工作或任務。

  崗位要求

  1.計算機相關專業(yè)大專以上學歷;

  2.2年以上大數(shù)據(jù)產(chǎn)品或項目開發(fā)經(jīng)驗,精通Hadoop生態(tài)圈,熟練使用Spark,HBase、Hive、Kafka、Redis等;

  3.精通SQL,熟練使用HSQL實現(xiàn)復雜數(shù)據(jù)處理邏輯,并具備數(shù)據(jù)處理調優(yōu)的能力;

  4.熟悉Linux開發(fā)環(huán)境,熟悉Linux的shell命令。

  5.具有良好的邏輯思維能力和嚴謹?shù)某绦蜷_發(fā)思想,具備獨立問題排查與處理的能力;

  6.良好的團隊精神和合作意識,強烈的責任心,對工作有激情,良好的溝通能力,能吃苦耐勞;

  7.有大數(shù)據(jù)項目或產(chǎn)品背景者優(yōu)先;

  8.有使用Spark SQL進行數(shù)據(jù)處理,并具有Spark SQL優(yōu)化經(jīng)驗者優(yōu)先。

  9.有Python或者Shell腳本開發(fā)經(jīng)驗優(yōu)先

  大數(shù)據(jù)開發(fā)工程師的職責文本精選4

  職責:

  1、負責數(shù)據(jù)采集、數(shù)據(jù)存儲、數(shù)據(jù)查詢、數(shù)據(jù)計算等基礎平臺的設計和開發(fā)工作;

  2、利用Hadoop、Spark、Flink等技術進行離線和實時數(shù)據(jù)開發(fā) ;

  3、負責大數(shù)據(jù)平臺的規(guī)劃升級、平臺維護和優(yōu)化 ;

  4、和其他部門或團隊溝通、資源協(xié)調并落實工作。

  任職要求

  1、本科及以上學歷;

  2、3年以上大型大數(shù)據(jù)平臺建設實施經(jīng)驗 ;

  3、掌握常用大數(shù)據(jù)組件hadoop、Hive、spark、Flink、hbase、elasticsearch等原理、使用和調優(yōu) ;

  4、具備較強技術功底,精通Java、Scala、Python等至少一種開發(fā)語言,能根據(jù)需求給出技術架構 ;

  5、有數(shù)據(jù)倉庫、元數(shù)據(jù)管理和治理的開發(fā)經(jīng)驗優(yōu)先 ;

  6、善于溝通,思維活躍、責任感強、工作積極主動,有良好的團隊協(xié)作意識。

  大數(shù)據(jù)開發(fā)工程師的職責文本精選5

  職責:

  1、負責完成業(yè)務和產(chǎn)品的對接,支持業(yè)務需求研發(fā);

  2、負責完成產(chǎn)品的迭代升級以及底層架構的升級研發(fā);

  3、完成團隊安排的其他相關日常工作任職要求;

  4、負責產(chǎn)品的實時業(yè)務和離線業(yè)務的研發(fā);

  5、支持開源大數(shù)據(jù)技術在數(shù)據(jù)系統(tǒng)中的使用,修復、優(yōu)化增強大數(shù)據(jù)技術;

  崗位要求:

  1、具有分布式系統(tǒng)架構開發(fā)能力,熟練使用storm、spark hbase者優(yōu)先。

  2、能夠使用實時計算平臺,進行實時業(yè)務數(shù)據(jù)的研發(fā)。

  3、能夠基于已有平臺進行離線業(yè)務的開發(fā)。

  4、有大數(shù)據(jù)應用產(chǎn)品研發(fā)經(jīng)驗,具有數(shù)據(jù)決策產(chǎn)品研發(fā)經(jīng)驗者優(yōu)先。

相關文章:

1.大數(shù)據(jù)運維工程師的工作職責

2.大數(shù)據(jù)架構師的工作職責描述

3.軟件UI工程師的工作職責文本內(nèi)容

4.大數(shù)據(jù)運維工程師崗位的主要職責

5.中級Java開發(fā)工程師的職責文本

83118