歡迎光臨管理者范文網(wǎng)
當(dāng)前位置:管理者范文網(wǎng) > 安全管理 > 崗位職責(zé) > 工程崗位職責(zé)

大數(shù)據(jù)研發(fā)工程師崗位職責(zé)12篇

發(fā)布時(shí)間:2023-04-04 19:12:05 查看人數(shù):42

大數(shù)據(jù)研發(fā)工程師崗位職責(zé)

第1篇 空間大數(shù)據(jù)研發(fā)工程師職位描述與崗位職責(zé)任職要求

職位描述:

崗位職責(zé):

1、研究空間大數(shù)據(jù)前沿技術(shù),參與空間大數(shù)據(jù)分析平臺(tái)的設(shè)計(jì)和開(kāi)發(fā);

2、與算法工程師對(duì)接,參與空間大數(shù)據(jù)分析算法的代碼實(shí)現(xiàn);

3、其它相關(guān)的gis開(kāi)發(fā)工作;

任職資格:

1、計(jì)算機(jī)、地理信息等相關(guān)專業(yè)背景,本科及以上學(xué)歷;

2、對(duì)空間數(shù)據(jù)結(jié)構(gòu)有深刻理解,熟悉空間數(shù)據(jù)庫(kù)引擎;

3、扎實(shí)的編程基礎(chǔ),能夠熟練運(yùn)用java/scala語(yǔ)言;

4、熟悉大數(shù)據(jù)管理系統(tǒng)和分布式計(jì)算框架,如:hbase、cassandra、mongodb、spark/flink等;

5、熟悉gis領(lǐng)域主流的分布式數(shù)據(jù)存儲(chǔ)方案,有g(shù)eomesa、geowave、geotrellis、geoserver、geotools、arcgis soe使用經(jīng)驗(yàn)者優(yōu)先;

6、具備較強(qiáng)的學(xué)習(xí)創(chuàng)新能力,能夠通過(guò)快速學(xué)習(xí)解決實(shí)際問(wèn)題;

第2篇 大數(shù)據(jù)研發(fā)工程師-廣告系統(tǒng)數(shù)據(jù)平臺(tái)職位描述與崗位職責(zé)任職要求

職位描述:

工作職責(zé):

1、廣告各類在線業(yè)務(wù)的離線數(shù)據(jù)加工與在線數(shù)據(jù)服務(wù)開(kāi)發(fā)與維護(hù);

2、數(shù)據(jù)服務(wù)接口及產(chǎn)品需求研發(fā)迭代,代碼review、bug修復(fù)及日常服務(wù)運(yùn)維;

3、針對(duì)海量數(shù)據(jù)處理和查詢需求,設(shè)計(jì)適應(yīng)業(yè)務(wù)變化的合理的多維數(shù)據(jù)分析系統(tǒng)架構(gòu),滿足多樣性的需求;

4、海量日志清洗加工,并抽象出可以多業(yè)務(wù)復(fù)用的數(shù)據(jù)模型。

任職要求:

1、計(jì)算機(jī)相關(guān)專業(yè)本科及以上學(xué)歷,熟悉hadoop架構(gòu)和工作原理,精通mapreduce編程;精通hive,有hql優(yōu)化經(jīng)驗(yàn);

2、熟悉java,python等多種編程技術(shù),編程能力強(qiáng),有web服務(wù)開(kāi)發(fā)經(jīng)驗(yàn),具備獨(dú)立完成模塊開(kāi)發(fā)能力;

3、理解基本的設(shè)計(jì)模式,能將業(yè)務(wù)需求快速理解成技術(shù)需求;

4、熟練使用mysql,熟練使用elasticsearch、druid者優(yōu)先;熟悉其原理者優(yōu)先;

5、善于溝通,工作積極主動(dòng),責(zé)任心強(qiáng),具備良好的團(tuán)隊(duì)協(xié)作能力;

6、具備良好的問(wèn)題分析與解決能力,有較強(qiáng)學(xué)習(xí)能力和邏輯思維能力。

額外加分項(xiàng)::

github等開(kāi)源社區(qū)貢獻(xiàn)者;

具備大規(guī)模分布式服務(wù)設(shè)計(jì)能力和經(jīng)驗(yàn)。

第3篇 高級(jí)大數(shù)據(jù)研發(fā)工程師(數(shù)據(jù)可視化)職位描述與崗位職責(zé)任職要求

職位描述:

崗位職責(zé):

1.負(fù)責(zé)全公司的數(shù)據(jù)平臺(tái)數(shù)據(jù)可視化研發(fā)工作

2.獨(dú)立完成數(shù)據(jù)可視化研發(fā)工作

任職要求:

1.計(jì)算機(jī)、電子通信、數(shù)學(xué)、統(tǒng)計(jì)或者相關(guān)專業(yè)本科及以上學(xué)歷

2.熟練掌握java/python中的一種語(yǔ)言

3.熟悉數(shù)據(jù)可視化開(kāi)發(fā),熟悉echarts應(yīng)用開(kāi)發(fā)的優(yōu)先

4.熟悉web開(kāi)發(fā),熟悉html,js,css

5.熟悉quick bi的優(yōu)先

6.具備良好的團(tuán)隊(duì)合作精神,工作有激情

7.對(duì)數(shù)據(jù)敏感,有產(chǎn)品思維的優(yōu)先

第4篇 品牌廣告大數(shù)據(jù)研發(fā)工程師-核心廣告系統(tǒng)職位描述與崗位職責(zé)任職要求

職位描述:

工作職責(zé):

1、負(fù)責(zé)品牌廣告業(yè)務(wù)平臺(tái)及其相關(guān)系統(tǒng)的研發(fā)

2、負(fù)責(zé)現(xiàn)有系統(tǒng)的問(wèn)題分析和改進(jìn),提高系統(tǒng)性能,保證系統(tǒng)穩(wěn)定性

3、持續(xù)改進(jìn)系統(tǒng)架構(gòu)、核心算法或者核心技術(shù)等,保證系統(tǒng)高性能、高可用性和高可擴(kuò)展性

4、新技術(shù)預(yù)研,完成項(xiàng)目的選型和設(shè)計(jì),難點(diǎn)公關(guān)

任職要求:

1、本科及以上學(xué)歷,一年以上大數(shù)據(jù)系統(tǒng)開(kāi)發(fā)經(jīng)驗(yàn)

2、熟悉python語(yǔ)言, 熟練使用linu_

3、對(duì)常用的redis、kafka等工具系統(tǒng)有一定的了解

4、有大數(shù)據(jù)集、分布式計(jì)算工具(hadoop,spark,hive,storm, es)等應(yīng)用開(kāi)發(fā)經(jīng)驗(yàn)優(yōu)先

5、有良好的團(tuán)隊(duì)合作精神,較強(qiáng)的溝通能力

6、愿意深入了解業(yè)務(wù)知識(shí),并能敏銳的發(fā)現(xiàn)業(yè)務(wù)痛點(diǎn)

7、有品牌廣告系統(tǒng)、dmp、輿情、指數(shù)平臺(tái)方向開(kāi)發(fā)經(jīng)驗(yàn)者優(yōu)先

第5篇 高級(jí)/資深大數(shù)據(jù)研發(fā)工程師職位描述與崗位職責(zé)任職要求

職位描述:

工作職責(zé):

1、負(fù)責(zé)字節(jié)跳動(dòng)用戶行為的理解和建模,幫助公司各項(xiàng)業(yè)務(wù)滿足用戶需求,提升用戶覆蓋;

2、負(fù)責(zé)在數(shù)據(jù)建設(shè)層面,對(duì)用戶隱私進(jìn)行脫敏處理,保證后續(xù)數(shù)據(jù)研發(fā)過(guò)程中保護(hù)用戶隱私;

3、探索、挖掘公司各項(xiàng)指標(biāo)、用戶滿意度、用戶增長(zhǎng)上的各項(xiàng)規(guī)律,并利用這些規(guī)律幫助產(chǎn)品提升和擴(kuò)展,增加用戶滿意度,擴(kuò)展用戶群體。

任職要求:

1、本科及以上學(xué)歷,計(jì)算機(jī)、統(tǒng)計(jì)學(xué)、數(shù)學(xué)等相關(guān)專業(yè);

2、強(qiáng)的編程和數(shù)據(jù)工具運(yùn)用能力,有hadoop,hive,spark,kafka,elasticsearch或者其他的大數(shù)據(jù)工具的使用經(jīng)驗(yàn);

3、對(duì)數(shù)據(jù)倉(cāng)庫(kù)、數(shù)據(jù)建模有一定認(rèn)知;有過(guò)數(shù)據(jù)使用相關(guān)經(jīng)驗(yàn)。

第6篇 大數(shù)據(jù)研發(fā)工程師-抖音/火山職位描述與崗位職責(zé)任職要求

職位描述:

工作職責(zé):

1、負(fù)責(zé)抖音/火山等多個(gè)業(yè)務(wù)線的策略算法建設(shè)與優(yōu)化工作;

2、通過(guò)海量數(shù)據(jù),分析與挖掘各種潛在關(guān)聯(lián),不斷優(yōu)化策略效果,保障用戶體驗(yàn);

4、負(fù)責(zé)實(shí)時(shí)及離線特征抽取、融合,為數(shù)據(jù)挖掘及策略平臺(tái)提供特征服務(wù);

5、負(fù)責(zé)大數(shù)據(jù)能力在產(chǎn)品功能上的落地,推動(dòng)產(chǎn)品數(shù)據(jù)化和智能化。

任職要求:

1、計(jì)算機(jī)等相關(guān)專業(yè),碩士或以上學(xué)歷,3年以上大數(shù)據(jù)、人工智能相關(guān)經(jīng)驗(yàn);

2、熟悉hive/hadoop/spark/flink/clickhouse/druid等大數(shù)據(jù)開(kāi)發(fā)技術(shù);

3、有良好的業(yè)務(wù)和產(chǎn)品sense,執(zhí)行力、推動(dòng)力強(qiáng)優(yōu)先;

4、有豐富的行業(yè)經(jīng)驗(yàn),豐富的專業(yè)知識(shí),獨(dú)特的行業(yè)見(jiàn)解,有戰(zhàn)略視野和規(guī)劃能力優(yōu)先;

5、優(yōu)秀的理解溝通能力,崇尚數(shù)據(jù)說(shuō)話,深信數(shù)據(jù)在驅(qū)動(dòng)業(yè)務(wù)、支撐決策上的價(jià)值優(yōu)先。

第7篇 大數(shù)據(jù)研發(fā)工程師職位描述與崗位職責(zé)任職要求

職位描述:

工作職責(zé):

1、打造業(yè)界領(lǐng)先的通用數(shù)據(jù)平臺(tái),包括實(shí)時(shí)數(shù)據(jù)流、數(shù)據(jù)倉(cāng)庫(kù)、調(diào)度系統(tǒng)、查詢引擎,用戶行為分析,abtest 實(shí)驗(yàn)系統(tǒng)等,降低數(shù)據(jù)的使用門檻,實(shí)現(xiàn)數(shù)據(jù)的最大價(jià)值

2、打造業(yè)界領(lǐng)先的存儲(chǔ)、計(jì)算等分布式系統(tǒng),為海量數(shù)據(jù)和大規(guī)模業(yè)務(wù)系統(tǒng)提供可靠的基礎(chǔ)設(shè)施

任職要求:

1、熟悉多項(xiàng)大數(shù)據(jù)領(lǐng)域的開(kāi)源框架,e.g. hadoop, hive, presto, storm, spark, kafka, hbase, redis, rocksdb, elasticsearch, druid, etc.

2、強(qiáng)悍的編碼和 troubleshooting 能力

3、樂(lè)于挑戰(zhàn)沒(méi)有明顯答案的問(wèn)題,對(duì)新技術(shù)有強(qiáng)烈的學(xué)習(xí)熱情

第8篇 實(shí)時(shí)大數(shù)據(jù)研發(fā)工程師/數(shù)據(jù)技術(shù)專家(p6-p8)職位描述與崗位職責(zé)任職要求

職位描述:

職責(zé)描述:

基于flink開(kāi)源大數(shù)據(jù)計(jì)算平臺(tái),在阿里集團(tuán)整體業(yè)務(wù)場(chǎng)景下,

1. 研發(fā)實(shí)時(shí)流計(jì)算數(shù)據(jù)研發(fā)平臺(tái),支持包括核心電商、云計(jì)算、大文娛、創(chuàng)新業(yè)務(wù)在內(nèi)的等各個(gè)綜合業(yè)務(wù)板塊務(wù);

2. 研發(fā)實(shí)時(shí)olap(elasticsearch,druid)賦能業(yè)務(wù)

3. 研發(fā)實(shí)時(shí)智能化(算法加工程)賦能業(yè)務(wù)

任職要求:

1.具備扎實(shí)的計(jì)算機(jī)理論基礎(chǔ), 對(duì)數(shù)據(jù)結(jié)構(gòu)及算法有較強(qiáng)的功底

2.精通java語(yǔ)言編程,具備優(yōu)秀的系統(tǒng)debug/profiling能力和經(jīng)驗(yàn)

3. 熟悉常見(jiàn)的面向?qū)ο笤O(shè)計(jì)模式,具備優(yōu)秀的系統(tǒng)架構(gòu)設(shè)計(jì)能力

4.熟悉hadoop/hbase/flink/spark streaming等開(kāi)源大數(shù)據(jù)技術(shù),在開(kāi)源社區(qū)活躍者優(yōu)先

5.熟悉elasticsearch/druid 等olap開(kāi)源技術(shù)優(yōu)先

6.具備實(shí)際的大數(shù)據(jù)業(yè)務(wù)開(kāi)發(fā)經(jīng)驗(yàn)以及良好的項(xiàng)目溝通和協(xié)調(diào)能力

7. 具備實(shí)時(shí)流計(jì)算數(shù)據(jù)開(kāi)發(fā)經(jīng)驗(yàn)、全棧開(kāi)發(fā)經(jīng)驗(yàn)優(yōu)先

第9篇 廣告大數(shù)據(jù)研發(fā)工程師/專家(p6-p8)3職位描述與崗位職責(zé)任職要求

職位描述:

職責(zé)描述:

社交廣告系統(tǒng)數(shù)據(jù)工程平臺(tái)研發(fā),偏重系統(tǒng)架構(gòu)設(shè)計(jì)與實(shí)現(xiàn),參加以下一到多項(xiàng)工作:

1. 搭建數(shù)據(jù)倉(cāng)庫(kù),存儲(chǔ)并處理海量的實(shí)時(shí)、批量數(shù)據(jù),滿足廣告業(yè)務(wù)的定向、分析和模型特征等業(yè)務(wù)需要

2. 建設(shè)數(shù)據(jù)發(fā)布系統(tǒng),將數(shù)據(jù)倉(cāng)庫(kù)的數(shù)據(jù)應(yīng)用到廣告在線業(yè)務(wù)

3. 特征工程工程系統(tǒng)建設(shè),為模型方提供特征數(shù)據(jù)流和特征離線調(diào)研、評(píng)估平臺(tái),并保證模型訓(xùn)練和預(yù)測(cè)階段的特征線上與線下一致性;

4. 用戶標(biāo)識(shí)映射、畫像數(shù)據(jù)在線服務(wù)的開(kāi)發(fā)與維護(hù);

5. 廣告后臺(tái)海量日志數(shù)據(jù)和廣告主數(shù)據(jù)處理平臺(tái);

6. 報(bào)表和廣告策略的統(tǒng)計(jì)數(shù)據(jù)生成和存儲(chǔ);

7. 多維透視業(yè)務(wù)索引和存儲(chǔ);

任職要求:

重點(diǎn)大學(xué)本科以上學(xué)歷,計(jì)算機(jī)相關(guān)專業(yè);

具有扎實(shí)的數(shù)據(jù)結(jié)構(gòu)和算法功底;

熟練使用 java,scala,c/c++, python;

有海量數(shù)據(jù)處理經(jīng)驗(yàn),熟悉 hadoop,spark,hbase,beam等開(kāi)源框架 ;

有分布式系統(tǒng),tensorflow等機(jī)器學(xué)習(xí)系統(tǒng)等經(jīng)驗(yàn)優(yōu)先 ;

有較強(qiáng)學(xué)習(xí)能力和邏輯思維能力,具備良好的問(wèn)題分析與解決能力;

善于溝通,工作積極主動(dòng),責(zé)任心強(qiáng),具備良好的團(tuán)隊(duì)協(xié)作能力

第10篇 高級(jí)實(shí)時(shí)大數(shù)據(jù)研發(fā)工程師/數(shù)據(jù)技術(shù)專家職位描述與崗位職責(zé)任職要求

職位描述:

職責(zé)描述:

基于flink開(kāi)源大數(shù)據(jù)計(jì)算平臺(tái),在集團(tuán)整體業(yè)務(wù)場(chǎng)景下,

1. 研發(fā)實(shí)時(shí)流計(jì)算數(shù)據(jù)研發(fā)平臺(tái),支持包括核心電商、云計(jì)算、大文娛、創(chuàng)新業(yè)務(wù)在內(nèi)的等各個(gè)綜合業(yè)務(wù)板塊務(wù);

2. 研發(fā)實(shí)時(shí)olap(elasticsearch,druid)賦能業(yè)務(wù)

3. 研發(fā)實(shí)時(shí)智能化(算法加工程)賦能業(yè)務(wù)

任職要求:

1.具備扎實(shí)的計(jì)算機(jī)理論基礎(chǔ), 對(duì)數(shù)據(jù)結(jié)構(gòu)及算法有較強(qiáng)的功底

2.精通java語(yǔ)言編程,具備優(yōu)秀的系統(tǒng)debug/profiling能力和經(jīng)驗(yàn)

3. 熟悉常見(jiàn)的面向?qū)ο笤O(shè)計(jì)模式,具備優(yōu)秀的系統(tǒng)架構(gòu)設(shè)計(jì)能力

4.熟悉hadoop/hbase/flink/spark streaming等開(kāi)源大數(shù)據(jù)技術(shù),在開(kāi)源社區(qū)活躍者優(yōu)先

5.熟悉elasticsearch/druid 等olap開(kāi)源技術(shù)優(yōu)先

6.具備實(shí)際的大數(shù)據(jù)業(yè)務(wù)開(kāi)發(fā)經(jīng)驗(yàn)以及良好的項(xiàng)目溝通和協(xié)調(diào)能力

7. 具備實(shí)時(shí)流計(jì)算數(shù)據(jù)開(kāi)發(fā)經(jīng)驗(yàn)、全棧開(kāi)發(fā)經(jīng)驗(yàn)優(yōu)先

第11篇 大數(shù)據(jù)研發(fā)工程師-平臺(tái)服務(wù)方向職位描述與崗位職責(zé)任職要求

職位描述:

工作職責(zé):

1、針對(duì)字節(jié)跳動(dòng)全局性數(shù)據(jù)分析要求,打造行業(yè)領(lǐng)先的數(shù)據(jù)平臺(tái),對(duì)全球用戶數(shù)據(jù),打造高效穩(wěn)定的batch和rt數(shù)據(jù)流;

2、利用大數(shù)據(jù)工具,打造計(jì)算,傳輸,分析,監(jiān)控平臺(tái);滿足字節(jié)跳動(dòng)全球用戶產(chǎn)品的指標(biāo)計(jì)算,多維分析等需求;

3、構(gòu)建高效穩(wěn)定的數(shù)據(jù)服務(wù),支撐字節(jié)跳動(dòng)全球各重要業(yè)務(wù)的用戶增長(zhǎng)。

任職要求:

1、計(jì)算機(jī)、數(shù)學(xué)相關(guān)專業(yè)本科及以上學(xué)歷,一年以上大數(shù)據(jù)開(kāi)發(fā)工作經(jīng)驗(yàn),數(shù)據(jù)挖掘和bi分析領(lǐng)域優(yōu)先;

2、熟悉多項(xiàng)大數(shù)據(jù)領(lǐng)域的開(kāi)源框架,e.g. hadoop, hive, presto, storm, spark, kafka, hbase, redis, rocksdb, elasticsearch, druid等;

3、強(qiáng)悍的編碼和學(xué)習(xí)能力;善于發(fā)現(xiàn)問(wèn)題,積極探索原因。

第12篇 大數(shù)據(jù)研發(fā)工程師-產(chǎn)品運(yùn)營(yíng)方向職位描述與崗位職責(zé)任職要求

職位描述:

工作職責(zé):

1、負(fù)責(zé)企業(yè)級(jí)大數(shù)據(jù)平臺(tái)的研發(fā),服務(wù)于今日頭條公司內(nèi)外的幾十條產(chǎn)品線;

2、不局限于按部就班的研發(fā)工作,有強(qiáng)烈的產(chǎn)品sense,對(duì)用戶體驗(yàn)敏感,能夠綜合運(yùn)用技術(shù)/產(chǎn)品/運(yùn)營(yíng)方案,提升終端用戶體驗(yàn);

3、平臺(tái)產(chǎn)品包括但不限于:用戶行為分析,查詢中心,bi報(bào)表,元數(shù)據(jù)管理,abtest系統(tǒng),數(shù)據(jù)開(kāi)發(fā)套件等;

任職要求:

1、計(jì)算機(jī)等相關(guān)專業(yè)優(yōu)先,本科及以上學(xué)歷;

2、復(fù)合型人才,有研發(fā)能力的pm,或有產(chǎn)品運(yùn)營(yíng)能力的研發(fā)等均可投遞;

3、做事積極主動(dòng),優(yōu)秀的組織協(xié)調(diào),推進(jìn)執(zhí)行能力,思路手段靈活,對(duì)用戶體驗(yàn)負(fù)責(zé);有數(shù)據(jù)分析,大數(shù)據(jù)研發(fā),數(shù)據(jù)產(chǎn)品設(shè)計(jì),售前售后等經(jīng)驗(yàn)之一者,優(yōu)先考慮;

大數(shù)據(jù)研發(fā)工程師崗位職責(zé)12篇

職位描述:職責(zé)描述:社交廣告系統(tǒng)數(shù)據(jù)工程平臺(tái)研發(fā),偏重系統(tǒng)架構(gòu)設(shè)計(jì)與實(shí)現(xiàn),參加以下一到多項(xiàng)工作:1.搭建數(shù)據(jù)倉(cāng)庫(kù),存儲(chǔ)并處理海量的實(shí)時(shí)、批量數(shù)據(jù),滿足廣告業(yè)務(wù)的定向、分析和模型特征等業(yè)務(wù)需要2.建設(shè)數(shù)據(jù)發(fā)布系統(tǒng),將數(shù)據(jù)倉(cāng)庫(kù)的數(shù)據(jù)應(yīng)用到廣告在線業(yè)務(wù)3.特征工程工程系統(tǒng)建設(shè),為模型方提供特征數(shù)據(jù)流…
推薦度:
點(diǎn)擊下載文檔文檔為doc格式

相關(guān)大數(shù)據(jù)研發(fā)信息

  • 大數(shù)據(jù)研發(fā)工程師崗位職責(zé)12篇
  • 大數(shù)據(jù)研發(fā)工程師崗位職責(zé)12篇42人關(guān)注

    職位描述:職責(zé)描述:社交廣告系統(tǒng)數(shù)據(jù)工程平臺(tái)研發(fā),偏重系統(tǒng)架構(gòu)設(shè)計(jì)與實(shí)現(xiàn),參加以下一到多項(xiàng)工作:1.搭建數(shù)據(jù)倉(cāng)庫(kù),存儲(chǔ)并處理海量的實(shí)時(shí)、批量數(shù)據(jù),滿足廣告業(yè)務(wù)的定向、 ...[更多]

工程崗位職責(zé)熱門信息