- 目錄
-
第1篇 推送數(shù)據(jù)工程師職位描述與崗位職責(zé)任職要求
職位描述:
工作職責(zé):
1、負(fù)責(zé)字節(jié)跳動(dòng)用戶行為的理解和建模,幫助公司各項(xiàng)業(yè)務(wù)滿足用戶需求,提升用戶覆蓋;
2、負(fù)責(zé)在數(shù)據(jù)建設(shè)層面,對(duì)用戶隱私進(jìn)行脫敏處理,保證后續(xù)數(shù)據(jù)研發(fā)過程中保護(hù)用戶隱私;
3、探索、挖掘公司各項(xiàng)指標(biāo)、用戶滿意度、用戶增長(zhǎng)上的各項(xiàng)規(guī)律,并利用這些規(guī)律幫助產(chǎn)品提升和擴(kuò)展,增加用戶滿意度,擴(kuò)展用戶群體。
任職要求:
1、本科及以上學(xué)歷,計(jì)算機(jī)、統(tǒng)計(jì)學(xué)、數(shù)學(xué)等相關(guān)專業(yè);
2、較強(qiáng)的編程和數(shù)據(jù)工具運(yùn)用能力,有hadoop,hive,spark,kafka,elasticsearch或者其他的大數(shù)據(jù)工具的使用經(jīng)驗(yàn);
3、對(duì)數(shù)據(jù)倉庫、數(shù)據(jù)建模有一定認(rèn)知;有過數(shù)據(jù)使用相關(guān)經(jīng)驗(yàn)。
第2篇 大數(shù)據(jù)開發(fā)工程師-偏數(shù)據(jù)模型方向-l80542職位描述與崗位職責(zé)任職要求
職位描述:
職責(zé)描述:
1、參與數(shù)據(jù)需求的溝通和模型設(shè)計(jì);
2、負(fù)責(zé)大數(shù)據(jù)平臺(tái)的數(shù)據(jù)需求開發(fā),包括實(shí)時(shí)和批量處理;
3、負(fù)責(zé)不同數(shù)據(jù)源的接入解析落地的設(shè)計(jì)開發(fā)工作;
4、負(fù)責(zé)數(shù)據(jù)質(zhì)量監(jiān)控,解決數(shù)據(jù)運(yùn)行和質(zhì)量問題。
任職要求:
1、計(jì)算機(jī)本科以上學(xué)歷,至少有3年數(shù)據(jù)開發(fā)經(jīng)驗(yàn);
2、精通java/scala/python,至少有3年以上開發(fā)使用經(jīng)驗(yàn);
3、熟悉spark,hive,flink,jstorm等大數(shù)據(jù)實(shí)時(shí)計(jì)算技術(shù);
4、掌握hive sql,sparksql,es query dsl 等查詢語言;擁有sql性能調(diào)優(yōu)經(jīng)驗(yàn);
5、具有較強(qiáng)的業(yè)務(wù)理解能力,較強(qiáng)的責(zé)任心、團(tuán)隊(duì)合作能力和溝通能力;
6、有過圖數(shù)據(jù)庫開發(fā)或spark mllib開發(fā)經(jīng)驗(yàn)者優(yōu)先考慮。
第3篇 數(shù)據(jù)通信系統(tǒng)工程師崗位職責(zé)數(shù)據(jù)通信系統(tǒng)工程師職責(zé)任職要求
數(shù)據(jù)通信系統(tǒng)工程師崗位職責(zé)
1、通信、電子、計(jì)算機(jī)等相關(guān)專業(yè);2、有較扎實(shí)的通信知識(shí),具備良好的溝通、理解與語言表達(dá)能力;3、有高度的責(zé)任心、有較強(qiáng)的團(tuán)隊(duì)協(xié)作和客戶服務(wù)意識(shí),能較好完成團(tuán)隊(duì)內(nèi)部各項(xiàng)工作,能承受一定工作壓力;4、了解通信行業(yè)標(biāo)準(zhǔn)和規(guī)范,能編制通信工程概預(yù)算,熟練使用cad、visio等工程設(shè)計(jì)軟件者;5、熟悉電信運(yùn)營(yíng)商網(wǎng)絡(luò)環(huán)境(核心網(wǎng)、增值業(yè)務(wù)、城域網(wǎng)),有從事運(yùn)營(yíng)商數(shù)據(jù)平臺(tái)規(guī)劃設(shè)計(jì)者優(yōu)先;6、熟悉服務(wù)器、存儲(chǔ)、網(wǎng)絡(luò)、信息安全、軟件開發(fā),有系統(tǒng)集成經(jīng)驗(yàn)者優(yōu)先;7、熟練使用visio、cad、word、e_cel、ppt等軟件,有技術(shù)方案編撰能力;8、語言表達(dá)能力強(qiáng)、溝通能力強(qiáng),能夠獨(dú)立承擔(dān)客戶溝通、方案講解等工作任務(wù);
第4篇 數(shù)據(jù)集成工程師崗位職責(zé)
數(shù)據(jù)集成/etl工程師 深圳知匯科技有限公司 深圳知匯科技有限公司,知匯 職責(zé)描述:1、分析醫(yī)院業(yè)務(wù)數(shù)據(jù)及數(shù)據(jù)流,參與數(shù)據(jù)模型的設(shè)計(jì);
2、負(fù)責(zé)數(shù)據(jù)集成腳本開發(fā)、etl開發(fā),對(duì)醫(yī)院信息系統(tǒng)數(shù)據(jù)進(jìn)行提取、清洗、轉(zhuǎn)換和整合;
3、進(jìn)行數(shù)據(jù)任務(wù)流程調(diào)優(yōu)及準(zhǔn)確性改進(jìn),進(jìn)行數(shù)據(jù)質(zhì)量監(jiān)測(cè)、校驗(yàn)和提升。
4、負(fù)責(zé)大數(shù)據(jù)平臺(tái)的開發(fā)、維護(hù)工作;
任職要求:1、2年以上數(shù)據(jù)平臺(tái)或商務(wù)智能領(lǐng)域開發(fā)工作經(jīng)驗(yàn),并實(shí)際參與過數(shù)據(jù)集成或etl開發(fā);
2、熟練掌握ssis、kettle、informatica等至少一種etl工具的使用;
3、熟悉sql server等主流數(shù)據(jù)庫(sql server、oracle、mysql等),有sql server事務(wù)復(fù)制 或oracle的goldengate經(jīng)驗(yàn)者優(yōu)先;
4、能熟練進(jìn)行sql查詢優(yōu)化,熟練使用存儲(chǔ)過程、有海量數(shù)據(jù)處理經(jīng)驗(yàn)者優(yōu)先;
5、有醫(yī)療信息系統(tǒng)(his、emr、集成平臺(tái)等)開發(fā)及實(shí)施經(jīng)驗(yàn)優(yōu)先;
第5篇 dba數(shù)據(jù)庫工程師崗位職責(zé)
數(shù)據(jù)庫dba 工程師 云天勵(lì)飛 深圳云天勵(lì)飛技術(shù)有限公司,云天勵(lì)飛,深圳云天勵(lì)飛,云天勵(lì)飛 職位描述:
崗位職責(zé):
1、負(fù)責(zé)管理核心數(shù)據(jù)庫系統(tǒng);
2、數(shù)據(jù)庫維護(hù)和監(jiān)控,并進(jìn)行查詢分析和優(yōu)化;
3、配合技術(shù)部項(xiàng)目進(jìn)行數(shù)據(jù)庫設(shè)計(jì),制定合適的數(shù)據(jù)庫架構(gòu)。
4、完善數(shù)據(jù)庫文檔管理,促進(jìn)知識(shí)積累和經(jīng)驗(yàn)分享,及改善工作效率;
5、研究前瞻性的數(shù)據(jù)庫技術(shù),促進(jìn)數(shù)據(jù)庫應(yīng)用技術(shù)的成長(zhǎng)進(jìn)化;
任職要求:
1、熟悉數(shù)據(jù)庫的運(yùn)行機(jī)制和體系架構(gòu),熟悉mysql,oracle或者sql server中一種;
2、熟悉數(shù)據(jù)庫的管理,擴(kuò)容,備份,優(yōu)化;
3、熟悉數(shù)據(jù)庫高可用可擴(kuò)展解決方案,有數(shù)據(jù)庫故障檢測(cè)和恢復(fù)經(jīng)驗(yàn);
4、熟悉 linu_操作系統(tǒng)的管理維護(hù)與使用,及常用服務(wù)的架設(shè)與維護(hù);
5、熟悉sql優(yōu)化;
6、熟悉 linu_系統(tǒng)下shell/script編程,至少掌握一門腳本編程語言(php、perl、python、ruby);
7、有自動(dòng)化運(yùn)維經(jīng)驗(yàn)者優(yōu)先;
8、有海量數(shù)據(jù)構(gòu)架經(jīng)驗(yàn)者優(yōu)先;
有以下經(jīng)驗(yàn)更優(yōu):
1、熟悉mysql的myisam,innodb,memory引擎,精通存儲(chǔ)過程和事務(wù);
2、linu_系統(tǒng)硬盤,內(nèi)存數(shù)據(jù)庫調(diào)優(yōu)。
第6篇 大數(shù)據(jù)基礎(chǔ)架構(gòu)工程師職位描述與崗位職責(zé)任職要求
職位描述:
職位描述:
1、負(fù)責(zé)hadoop平臺(tái)集群架構(gòu)、搭建、運(yùn)維;
2、負(fù)責(zé)搭建分布式計(jì)算平臺(tái)、查詢引擎、中間件;
3、負(fù)責(zé)大數(shù)據(jù)平臺(tái)資源規(guī)劃、權(quán)限控制;
4、制定平臺(tái)運(yùn)營(yíng)管理規(guī)范,保障平臺(tái)可持續(xù)高效、穩(wěn)定運(yùn)行。
任職要求:
1、本科或以上學(xué)歷,計(jì)算機(jī)相關(guān)專業(yè)優(yōu)先;
2、熟悉java后臺(tái)服務(wù)開發(fā)和面向?qū)ο蟪绦蛟O(shè)計(jì);
3、熟悉hadoop生態(tài)圈及hdfs、hive、kafka、spark、flink等開源產(chǎn)品;
4、精通java有較強(qiáng)的編碼能力,能獨(dú)立解決技術(shù)難題。
附加要求:
1、熟悉hbase、spark、zookeeper等任一開源代碼優(yōu)先;
2、有分布式、緩存、消息隊(duì)列等研發(fā)經(jīng)驗(yàn)優(yōu)先。
第7篇 數(shù)據(jù)庫開發(fā)工程師-南昌職位描述與崗位職責(zé)任職要求
職位描述:
工作概述:
從事數(shù)據(jù)庫開發(fā)維護(hù)相關(guān)工作。
職位要求:
1.熟悉oracle或db2數(shù)據(jù)庫,并從業(yè)1年以上;
2.熟練掌握sql語句,并有存儲(chǔ)過程開發(fā)經(jīng)驗(yàn);
3.熟悉電信業(yè)務(wù)優(yōu)先錄??;
4.做過大數(shù)據(jù)項(xiàng)目?jī)?yōu)先錄取;
5.團(tuán)隊(duì)合作意識(shí),并能適應(yīng)工作壓力和一定量加班。
第8篇 數(shù)據(jù)抓取資深工程師職位描述與崗位職責(zé)任職要求
職位描述:
工作職責(zé):
1、負(fù)責(zé)今日頭條、西瓜視頻、topbuzz、buzzvideo等產(chǎn)品的全球內(nèi)容接入,通過算法智能解析各語種頁面結(jié)構(gòu),自適應(yīng)提取頁面關(guān)鍵信息
2、負(fù)責(zé)全網(wǎng)圖文、長(zhǎng)短視頻、sns內(nèi)容監(jiān)控,對(duì)海量的站內(nèi)外發(fā)文、用戶關(guān)系分析挖掘;每日處理上億條數(shù)據(jù),提供幾十億內(nèi)容在線服務(wù)
3、負(fù)責(zé)通用垂直抓取平臺(tái)建設(shè),服務(wù)頭條、抖音等所有業(yè)務(wù)團(tuán)隊(duì),快速解決各種不同的抓取訴求,提供數(shù)據(jù)和平臺(tái)支持
4、負(fù)責(zé)項(xiàng)目整體架構(gòu)設(shè)計(jì)與優(yōu)化,主導(dǎo)代碼開發(fā)測(cè)試,并積極推動(dòng)上線;負(fù)責(zé)初、中級(jí)工程師的培養(yǎng)
任職要求:
1、具備強(qiáng)悍的編碼能力,有扎實(shí)的數(shù)據(jù)結(jié)構(gòu)和算法功底
2、精通python、php、c++、java、golang中的至少一門語言
3、理解http、計(jì)算機(jī)網(wǎng)絡(luò),熟悉html、dom、_path等
4、責(zé)任心強(qiáng),積極主動(dòng),有良好的溝通能力和團(tuán)隊(duì)合作能力
5、工作認(rèn)真細(xì)致踏實(shí),較強(qiáng)的學(xué)習(xí)能力、分析解決問題能力
6、有很好的產(chǎn)品意識(shí),對(duì)業(yè)務(wù)流程有良好的抽象和總結(jié)能力
第9篇 地圖數(shù)據(jù)工程師崗位職責(zé)
地圖數(shù)據(jù)工程師 銀泰商業(yè)集團(tuán)有限公司 浙江銀泰百貨有限公司,銀泰商業(yè),銀泰 arcgis地圖工程師:
【崗位描述】
1、室內(nèi)地圖的采集和繪制;
2、室內(nèi)定位指紋信息的點(diǎn)位采集
【崗位要求】
1、地圖測(cè)繪、gis、計(jì)算機(jī)、室內(nèi)建筑設(shè)計(jì)等相關(guān)專畢業(yè),或經(jīng)過相關(guān)培訓(xùn),具有一定的外業(yè)測(cè)繪和建筑繪圖能力;
2、熟練使用autocad和arcgis等制圖軟件;
3、了解gis數(shù)據(jù)和地圖圖式規(guī)范,熟悉地圖數(shù)據(jù)的處理流程和方法;
4、有室內(nèi)地圖測(cè)量制作和數(shù)據(jù)處理工作經(jīng)驗(yàn)者優(yōu)先(例如高德或百度室內(nèi)地圖);
5、腳本開發(fā)項(xiàng)目經(jīng)驗(yàn)優(yōu)先。
第10篇 高級(jí)java開發(fā)工程師(大數(shù)據(jù))職位描述與崗位職責(zé)任職要求
職位描述:
崗位職責(zé):
1.負(fù)責(zé)物聯(lián)網(wǎng)、大數(shù)據(jù)平臺(tái)相關(guān)的技術(shù)研究、研發(fā)與測(cè)試等工作
2.負(fù)責(zé)基于物聯(lián)網(wǎng)、大數(shù)據(jù)平臺(tái)進(jìn)行業(yè)務(wù)開發(fā)
技能要求:
1.本科以上學(xué)歷,1年以上工作經(jīng)驗(yàn);
2.精通java后臺(tái)程序設(shè)計(jì),java基礎(chǔ)扎實(shí),要求掌握jvm基本原理、類加載、反射、集合、并發(fā)、io、網(wǎng)絡(luò)等內(nèi)容;
3.對(duì)數(shù)據(jù)結(jié)構(gòu)、算法有深刻理解;
4.熟悉linu_開發(fā)環(huán)境,熟悉python、shell、perl中的一種;
5.有hadoop、hbase、storm、kafka等系統(tǒng)的源代碼閱讀經(jīng)驗(yàn)者優(yōu)先。
第11篇 前端開發(fā)工程師(數(shù)據(jù)可視化)職位描述與崗位職責(zé)任職要求
職位描述:
工作職責(zé):
1、和大數(shù)據(jù)工程師共同工作,探索可視化的技術(shù)方案和產(chǎn)品應(yīng)用;
2、開發(fā)展示為主的數(shù)據(jù)大屏和業(yè)務(wù)分析為主的數(shù)據(jù)產(chǎn)品以及在移動(dòng)端數(shù)據(jù)可視化項(xiàng)目;
3、負(fù)責(zé)數(shù)據(jù)產(chǎn)品/可視化大屏的前端架構(gòu)和應(yīng)用后臺(tái)及通用組件的開發(fā);
任職要求:
1、本科及以上學(xué)歷,功底扎實(shí),視野開闊,對(duì)新技術(shù)具有敏感和熱情;
2、熟悉數(shù)據(jù)可視化開源方案,有數(shù)據(jù)分析場(chǎng)景/數(shù)據(jù)可視化經(jīng)驗(yàn)者(echarts/highcharts/d3)優(yōu)先;
3、技術(shù)跟隨前沿,熟悉servlet,html5,javascript,json,了解node/angularjs/react;
4、熟悉web后臺(tái)性能優(yōu)化和前端展示技術(shù);
5、熟悉1-2種分析型數(shù)據(jù)庫(如db/hive/neo4j)者優(yōu)先。
第12篇 bi數(shù)據(jù)倉庫工程師崗位職責(zé)
bi工程師-數(shù)據(jù)倉庫 涂鴉智能 杭州涂鴉科技有限公司,涂鴉智能,愛相機(jī) 崗位職責(zé):
1. 負(fù)責(zé)業(yè)務(wù)數(shù)據(jù)調(diào)研、需求理解,數(shù)據(jù)采集方案設(shè)計(jì)及實(shí)現(xiàn);
2. 負(fù)責(zé)建立數(shù)據(jù)模型,根據(jù)業(yè)務(wù)設(shè)計(jì)數(shù)據(jù)主題;
3. 負(fù)責(zé)數(shù)據(jù)模型的etl編寫,參與團(tuán)隊(duì)etl流程的優(yōu)化及解決etl相關(guān)技術(shù)問題;
4. 理解業(yè)務(wù)方的數(shù)據(jù)需求,提供面向業(yè)務(wù)的olap、報(bào)表、數(shù)據(jù)提取等數(shù)據(jù)服務(wù);
任職要求:
1. 本科及以上學(xué)歷,計(jì)算機(jī)相關(guān)專業(yè),2-5年企業(yè)級(jí)數(shù)據(jù)平臺(tái)相關(guān)系統(tǒng)開發(fā)經(jīng)驗(yàn);
2. sql技能嫻熟,精通hive-sql,presto-sql
3. 具有扎實(shí)的計(jì)算機(jī)操作系統(tǒng)、數(shù)據(jù)結(jié)構(gòu)等編程基礎(chǔ),熟悉java或scala語言;
4. 有過2年以上bi項(xiàng)目經(jīng)驗(yàn),熟悉開源的bi工具如:metabase,superset,redash.有實(shí)際操作經(jīng)驗(yàn)。
7. 有良好的溝通能力,善于主動(dòng)思考和行動(dòng),有極強(qiáng)的責(zé)任心和自驅(qū)力。
第13篇 數(shù)據(jù)爬蟲工程師職位描述與崗位職責(zé)任職要求
職位描述:
工作職責(zé):
1.開發(fā)網(wǎng)頁自動(dòng)化腳本。
2.負(fù)責(zé)商品信息結(jié)構(gòu)化,編寫自動(dòng)化腳本解析網(wǎng)頁信息。
3.商品索引系統(tǒng):億級(jí)sku的庫存價(jià)格實(shí)時(shí)跟蹤同步,并對(duì)商品進(jìn)行智能分類、本地化、圖片處理和去重。
4.設(shè)計(jì)、開發(fā)、測(cè)試、部署以及維護(hù)并改進(jìn)各子系統(tǒng);
5.管理項(xiàng)目?jī)?yōu)先級(jí)并按時(shí)交付。
職位要求:
1.全日制統(tǒng)招本科、碩士畢業(yè),1年以上軟件開發(fā)工作經(jīng)驗(yàn);
2.熟悉至少一門通用靜態(tài)編譯編程語言,c/c++/java/c#/go;
3.熟悉web端基礎(chǔ)標(biāo)準(zhǔn),包括html、css、javascript、json等;
4.熟悉python或其他腳本語言,有興趣和能力根據(jù)需求學(xué)習(xí)其他編程語言;
5.熟悉uni_/linu_環(huán)境,memcache/redis/mongodb等存儲(chǔ)系統(tǒng),能獨(dú)立設(shè)計(jì)開發(fā)包括前后端交互的業(yè)務(wù)子系統(tǒng);
6.熟悉常見的設(shè)計(jì)模式、單元測(cè)試、持續(xù)開發(fā)集成、code review,并能在日常工作踐行;
7.了解搜索引擎、電子商務(wù)、社交類應(yīng)用的系統(tǒng)基本架構(gòu),能對(duì)已有的子系統(tǒng)進(jìn)行優(yōu)化調(diào)整的優(yōu)先;
8.活躍的開源項(xiàng)目貢獻(xiàn)者優(yōu)先。
第14篇 大數(shù)據(jù)架構(gòu)資深工程師職位描述與崗位職責(zé)任職要求
職位描述:
工作職責(zé):
1、打造業(yè)界領(lǐng)先的存儲(chǔ)、計(jì)算等分布式系統(tǒng);
2、為海量數(shù)據(jù)和大規(guī)模業(yè)務(wù)系統(tǒng)提供可靠的基礎(chǔ)設(shè)施。
任職要求:
1、掌握分布式系統(tǒng)原理,對(duì)存儲(chǔ)、計(jì)算、消息隊(duì)列、集群管理中的一項(xiàng)或多項(xiàng)有深入的理解和認(rèn)識(shí);
2、樂于挑戰(zhàn)沒有明顯答案的問題,能快速理解業(yè)務(wù)場(chǎng)景,從具體問題中抽象出通用的解決方案;
3、存儲(chǔ)方向:對(duì) hdfs, rocksdb, leveldb, memcache, redis, mysql, hbase, kafka 的一項(xiàng)或多項(xiàng)有經(jīng)驗(yàn)者優(yōu)先;
4、計(jì)算方向:對(duì) spark, mapreduce, storm, hive, presto, impala 的一項(xiàng)或多項(xiàng)有經(jīng)驗(yàn)者優(yōu)先;
5、集群管理方向:對(duì) yarn, mesos 的一項(xiàng)或多項(xiàng)有經(jīng)驗(yàn)者優(yōu)先;
6、向開源社區(qū)貢獻(xiàn)過 patch 者優(yōu)先,請(qǐng)?jiān)诤?jiǎn)歷上說明。
第15篇 erp數(shù)據(jù)工程師崗位職責(zé)erp數(shù)據(jù)工程師職責(zé)任職要求
erp數(shù)據(jù)工程師崗位職責(zé)
1.需要將原來各系統(tǒng)的數(shù)據(jù)進(jìn)行分析,整理并導(dǎo)入到erp。2.與業(yè)務(wù)部門溝通,收集需要導(dǎo)入的數(shù)據(jù)。3.有計(jì)算機(jī)軟件相關(guān)背景,熟悉系統(tǒng)維護(hù),可以幫助用戶解決日常簡(jiǎn)單問題,懂?dāng)?shù)據(jù)庫者優(yōu)先考慮4.熟練運(yùn)用e_cel5.三年左右工作經(jīng)驗(yàn),英語一般。6.工作認(rèn)真負(fù)責(zé).細(xì)致,有較強(qiáng)的責(zé)任心。
第16篇 大數(shù)據(jù)查詢引擎高級(jí)工程師職位描述與崗位職責(zé)任職要求
職位描述:
工作職責(zé):
1、研發(fā)業(yè)界領(lǐng)先的交互式數(shù)據(jù)分析系統(tǒng),服務(wù)于今日頭條全公司的數(shù)十個(gè)用戶產(chǎn)品線;
2、面向超大規(guī)模數(shù)據(jù)問題,每天千億增量的用戶行為數(shù)據(jù),秒級(jí)處理pb級(jí)別的數(shù)據(jù)計(jì)算;
3、善于理解和抽象業(yè)務(wù)問題,支撐多樣的海量數(shù)據(jù)分析場(chǎng)景。
任職要求:
1、理解分布式系統(tǒng),思路清晰,具備生產(chǎn)系統(tǒng)快速 trouble-shooting 的經(jīng)驗(yàn)和能力,擅長(zhǎng)分析深層次的原因;
2、對(duì)市面上常見的 olap 系統(tǒng)設(shè)計(jì)與源碼有深入研究,給 hive/kylin/presto/spark/tez 等項(xiàng)目提交過 patch者優(yōu)先。