- 目錄
-
第1篇 高級大數(shù)據(jù)工程師職位描述與崗位職責任職要求
職位描述：
崗位職責:
1、參與大數(shù)據(jù)開放平臺基礎能力建設，承擔系統(tǒng)架構(gòu)、組件開發(fā)、方案驗證等工作；
2、參與構(gòu)建大數(shù)據(jù)系列產(chǎn)品，包括但不限于用戶畫像、用戶增長與用戶經(jīng)營、數(shù)據(jù)分析挖掘、實時計算、數(shù)據(jù)分發(fā)、機器學習平臺、風控反欺詐等產(chǎn)品線；
任職要求：
1、 統(tǒng)招本科或以上學歷，5年以上大數(shù)據(jù)開發(fā)工作經(jīng)驗；
2、扎實的java基礎，能熟練使用java進行軟件功能開發(fā)；
3、熟練掌握基于hadoop生態(tài)的大數(shù)據(jù)開發(fā)工具，包括hive、spark、hbase、sqoop、es、impala、flink、storm等，有實時系統(tǒng)開發(fā)經(jīng)驗優(yōu)先；
4、熟悉常用的數(shù)據(jù)挖掘算法，例如聚類、回歸、決策樹等，有過nlp項目經(jīng)驗優(yōu)先；
5、有過互聯(lián)網(wǎng)公司數(shù)據(jù)倉庫、分析系統(tǒng)、用戶畫像、廣告平臺等產(chǎn)品開發(fā)經(jīng)驗者優(yōu)先；
6、工作積極主動，善于合作，敏而好學；
第2篇 數(shù)據(jù)工程師（銀行-南昌）職位描述與崗位職責任職要求
職位描述：
崗位職責:
1、協(xié)助數(shù)據(jù)倉庫架構(gòu)師制定數(shù)據(jù)處理和業(yè)務個性化規(guī)范；
2、協(xié)助項目經(jīng)理在業(yè)務層面對基于nc的標準分析產(chǎn)品研發(fā)提供指導；
3、針對nc的數(shù)據(jù)抽取和dw建模；
4、有計劃的提升整個團隊的數(shù)據(jù)處理能力
5、適應區(qū)域內(nèi)的出差
任職資格:
1、1年以上oracle、或db2數(shù)據(jù)庫開發(fā)經(jīng)驗；
2、能熟練使用sqlplus、pl/sql、toad等工具中的一種進行sql、存儲過程開發(fā)；
3、熟悉數(shù)據(jù)倉庫、etl、olap分析；
4、熟悉powerdesigner建模工具，能應用建立數(shù)據(jù)模型；
5、熟悉數(shù)據(jù)庫性能分析及sql調(diào)優(yōu)；
6、熟悉linu_系統(tǒng)，熟悉shell腳本開發(fā)，熟悉awk等文件處理方法
7、工作認真負責，具有良好的團隊精神及溝通表達能力；
8、有銀行行業(yè)背景者優(yōu)先；
9、熟悉bi業(yè)務分析的相關知識，如dw建模和etl等。
第3篇 大數(shù)據(jù)工程師（ elasticsearch/spark）職位描述與崗位職責任職要求
職位描述：
崗位職責：
1、 負責基于elasticsearch的研發(fā)；
2、 負責基于spark生態(tài)系統(tǒng)的研發(fā)；
3、 負責elasticsearch/spark集群調(diào)優(yōu)；
4、 負責對數(shù)據(jù)進行建模。
任職要求：
1、 大學本科及以上學歷，計算機相關專業(yè)；
2、 三年以上工作經(jīng)驗；
3、 熟練掌握java/scala后端開發(fā)，如多線程、網(wǎng)絡等；
4、 熟練掌握python、shell中的一種腳本語言；
5、 熟悉spark 生態(tài)系統(tǒng)組件，如：hadoop、flume、kafka、hbase、hive、pig、zookeeper；
6、 熟悉linu_開發(fā)環(huán)境；
7、 熟悉elasticsearch、lucene優(yōu)先；
8、 能夠讀懂及書寫英文文檔；
9、 有spark調(diào)優(yōu)、統(tǒng)計學知識的優(yōu)先考慮；
10、 有機器學習經(jīng)驗者優(yōu)先考慮；
11、 對新技術有孜孜不倦的熱情。
第4篇 大數(shù)據(jù)工程師（電商行業(yè)）職位描述與崗位職責任職要求
職位描述：
工作職責：
1、基于hive的數(shù)據(jù)倉庫建設、etl開發(fā)；
2、使用hive/flink等平臺進行分析內(nèi)部及外部的數(shù)據(jù)，配合業(yè)務團隊進行定量和定性分析，把數(shù)據(jù)轉(zhuǎn)化成為業(yè)務增值的信息；
3、探索、評估新的技術和解決方案，提高數(shù)據(jù)并行計算能力和運行速度。
任職要求：
1、熟悉大數(shù)據(jù)相關技術：kafka/flink/hadoop/druid/hbase 等；
2、具備數(shù)據(jù)庫系統(tǒng)理論知識，掌握主流數(shù)據(jù)庫管理和應用，精通sql；
3、了解統(tǒng)計以及數(shù)據(jù)挖掘、機器學習、人工智能技術，會使用關聯(lián)分析、分類預測、聚類分析等常用分析方法；
4、熟練使用 java、python、php、go語言中的一種或者多種；
6、兩年以上大數(shù)據(jù)開發(fā)經(jīng)驗，有高性能分布式平臺開發(fā)經(jīng)驗，有電商行業(yè)經(jīng)驗優(yōu)先。
第5篇 華為數(shù)據(jù)工程師崗位職責職位要求
職責描述：
1.負責項目組數(shù)據(jù)挖掘、數(shù)據(jù)分析、數(shù)據(jù)建模工作，能夠按要求、高質(zhì)量地完成任務；
2.熟練掌握分析設計工具，按照規(guī)范的要求，編寫設計文檔；
3.按照設計功能，實現(xiàn)模塊的代碼編寫和維護；
4.按照公司的規(guī)范進行編碼，并對開發(fā)的代碼進行單元測試；5.負責項目開發(fā)過程中的技術攻關及運行中出現(xiàn)的技術問題。
任職資格：
1、3年以上數(shù)據(jù)倉庫和數(shù)據(jù)建模經(jīng)驗，包括不限于：etl、dw、olap、多維數(shù)據(jù)模型等；
2、一定的數(shù)據(jù)可視分析基礎，熟練掌握power pivot、powerbi等工具用于數(shù)據(jù)分析；
3、有ssas方案的設計或開發(fā)經(jīng)驗優(yōu)先；
4、熟練使用至少一款bi相關工具，包括tableau，powerbi，oracle biee，qlik等等。
5、理解數(shù)據(jù)倉庫和數(shù)據(jù)建模相關知識
6、溝通能力優(yōu)秀，勤奮好學，熱愛數(shù)據(jù)工作；7、良好的團隊精神，工作負責，具有良好的職業(yè)操守。
8、本科以上學歷學位，具備cet-4/6優(yōu)先。
崗位要求：
學歷要求：本科
語言要求：不限
年齡要求：不限
工作年限：3-5年
第6篇 大數(shù)據(jù)工程師崗位職責職位要求
職責描述：
華為企業(yè)bg-大數(shù)據(jù)工程師
1、基于hadoop/spark/mppdb的大數(shù)據(jù)、數(shù)倉平臺架構(gòu)設計及開發(fā)工作
2、數(shù)據(jù)處理流程設計及開發(fā)
3、海量數(shù)據(jù)的采集、存儲、管理、分析、建模
4、負責大數(shù)據(jù)、數(shù)倉平臺的監(jiān)控及優(yōu)化，針對持續(xù)增長的數(shù)據(jù)提供相應的解決方案
5、負責大數(shù)據(jù)、數(shù)倉項目的疑難問題解決，性能優(yōu)化
專業(yè)知識要求：
1、有3年以上相關崗位工作經(jīng)歷，或者非金融業(yè)的數(shù)據(jù)服務或信息數(shù)據(jù)管理工作經(jīng)驗
2、數(shù)學、計算機技術等相關專業(yè)
3、精通大數(shù)據(jù)（mppdb、hadoop）等相關技術，并精通hbase/hive/mr/spark/solr/storm/flink其中的任意3個組件技術。
4、至少精通主流數(shù)據(jù)庫技術oracle/postresql/mysql/sql server中的一種，精通數(shù)據(jù)倉庫理論架構(gòu)，包括但不限于數(shù)據(jù)調(diào)度、etl、元數(shù)據(jù)管理、數(shù)據(jù)監(jiān)控；
5、精通1-2門開發(fā)語言（java/python/scala/shell）
6、具有比較突出的組織、策劃、協(xié)調(diào)及溝通能力，有強烈的結(jié)果導向和客戶導向。
崗位要求：
學歷要求：本科
語言要求：不限
年齡要求：不限
工作年限：3-5年
第7篇 etl數(shù)據(jù)工程師崗位職責任職要求
etl數(shù)據(jù)工程師崗位職責
崗位職責:
1. 參與金融大數(shù)據(jù)研發(fā);
2. 參與數(shù)據(jù)倉庫etl流程的優(yōu)化及解決etl相關技術問題;
3. 負責數(shù)據(jù)基礎架構(gòu)的升級和優(yōu)化，不斷提升系統(tǒng)的穩(wěn)定性和效率;
4. 設計并實現(xiàn)對機器學習、數(shù)據(jù)挖掘的系統(tǒng)性支持;
崗位要求:
1. 計算機相關專業(yè)，本科及以上學歷;
2. 具備良好的編程習慣，熟悉常用的數(shù)據(jù)結(jié)構(gòu)和算法;
3. 熟練掌握php/python/java任一語言;
4. 具備良好的數(shù)據(jù)庫理論基礎知識，較強的sql書寫能力，熟練使用mysql/postgres等數(shù)據(jù)庫;
5. 有數(shù)據(jù)處理，etl流程優(yōu)化實戰(zhàn)經(jīng)驗，熟悉kettle/informatica等抽取工具;
6. 有使用 kafka，storm，spark streaming 實時數(shù)據(jù)處理系統(tǒng)建設經(jīng)驗優(yōu)先。
etl數(shù)據(jù)工程師崗位
第8篇 oracle數(shù)據(jù)工程師崗位職責任職要求
oracle數(shù)據(jù)工程師崗位職責
工作職責:
1. 數(shù)據(jù)倉庫和業(yè)務數(shù)據(jù)集市建設
2. 業(yè)務模型抽象、數(shù)據(jù)模型設計開發(fā)
3. 支持業(yè)務的數(shù)據(jù)需求，跟pm一起完善業(yè)務的數(shù)據(jù)分析體系和工具
4. etl、數(shù)據(jù)應用和服務的設計開發(fā)
5. 積累數(shù)據(jù)生產(chǎn)、分析工具，不斷提高數(shù)據(jù)生產(chǎn)效率
6. 實時數(shù)據(jù)倉庫設計、開發(fā)與服務
崗位要求:
1. 快速的業(yè)務學習和理解能力，有良好的自驅(qū)能力，對工作充滿熱情
2. 熟悉數(shù)據(jù)倉庫各類模型建模理論，了解數(shù)據(jù)倉庫數(shù)據(jù)分層架構(gòu)，熟悉多維數(shù)據(jù)模型設計
3. 具備大型數(shù)據(jù)倉庫架構(gòu)設計、模型設計、etl設計的相關經(jīng)驗
4. 精通oracle數(shù)據(jù)庫技術，深刻理解數(shù)據(jù)庫/oracle特性，有過硬的sql能力，能編寫高性能的數(shù)據(jù)處理程序。
5. 具備hadoop、hive、hbase，spark等大數(shù)據(jù)技術背景，并具有開發(fā)經(jīng)驗者優(yōu)先
6. 具備海量數(shù)據(jù)處理經(jīng)驗者優(yōu)先
oracle數(shù)據(jù)工程師崗位
第9篇 工業(yè)大數(shù)據(jù)工程師職位描述與崗位職責任職要求
職位描述：
職責描述：
1、針對工廠四大ai場景（機器視覺/圖像識別、機器學習/phm、知識發(fā)現(xiàn)、自然語言處理），給出有競爭力的算法實現(xiàn)；
2、深入了解業(yè)務需求，能對算法和模型應用效果進行評估、分析和優(yōu)化等；
3、ai和大數(shù)據(jù)相關課程開發(fā)培訓；
任職要求：
1、全日制本科及以上學歷，有5年以上相關工作經(jīng)驗；
2、曾經(jīng)實作過ai算法功能，有深度學習項目和相關經(jīng)驗，圖像處理經(jīng)驗優(yōu)先考慮；
3、熟悉流行的ai學習開源工具，如tensorflow等，有計算機視覺、深度學習的開發(fā)經(jīng)驗者優(yōu)先；
4、具備處理、清洗、核定分析數(shù)據(jù)能力，熟悉編程語言python等。
第10篇 etl數(shù)據(jù)工程師職位描述與崗位職責任職要求
職位描述：
職責：
1. 按業(yè)務分析需求進行建模；
2. 進行數(shù)據(jù)倉庫需求分析、方案設計、etl裝載過程設計；
3. 從業(yè)務數(shù)據(jù)庫到數(shù)據(jù)倉庫的etl開發(fā)；
4. 結(jié)合業(yè)務流程和需求進行數(shù)據(jù)分析；
任職資格：
1. 本科以上學歷，計算機等信息技術相關專業(yè)；
2. 有互聯(lián)網(wǎng)金融相關工作經(jīng)驗，了解相關數(shù)據(jù)流和業(yè)務背景優(yōu)先；
3. 兩年及以上數(shù)據(jù)倉庫相關工作經(jīng)驗，對數(shù)據(jù)倉庫系統(tǒng)架構(gòu)具有良好的認識，熟悉數(shù)據(jù)倉庫相關技術，如 etl、報表開發(fā)，具備數(shù)據(jù)分析技術并具有相關項目經(jīng)驗；
4. 具有hive、spark、mysql、oracle等至少一種大型數(shù)據(jù)庫的應用開發(fā)經(jīng)驗，熟悉數(shù)據(jù)標準管理、元數(shù)據(jù)管理、數(shù)據(jù)質(zhì)量管理；
5. 具備python統(tǒng)計和數(shù)據(jù)挖掘相關基本開發(fā)能力；
6. 溝通能力好，善于規(guī)劃和總結(jié)，注重團隊合作及知識共享，能承擔一定的工作壓力；
第11篇 資深大數(shù)據(jù)工程師職位描述與崗位職責任職要求
職位描述：
【崗位職責】：
1、參與公司數(shù)據(jù)平臺架構(gòu)設計，負責大數(shù)據(jù)平臺和數(shù)據(jù)倉庫相關建設；
2、依據(jù)公司的大數(shù)據(jù)技術發(fā)展路線，負責基于hadoop生態(tài)系統(tǒng)和mpp數(shù)據(jù)庫的大規(guī)模數(shù)據(jù)平臺的研發(fā)及數(shù)據(jù)倉庫建設，提供可靠的數(shù)據(jù)存儲和訪問能力；
3、負責公司大數(shù)據(jù)平臺和數(shù)據(jù)倉庫的搭建、開發(fā)、管理、監(jiān)控和性能調(diào)優(yōu)，保證集群高效穩(wěn)定運行；
4、規(guī)劃與開發(fā)離線數(shù)據(jù)平臺系統(tǒng)，處理海量數(shù)據(jù)，優(yōu)化存儲和計算架構(gòu)的性能；
5、負責數(shù)據(jù)平臺技術難點攻關、技術選型評估，參與開發(fā)流程的討論與優(yōu)化；
6、參與公司數(shù)據(jù)治理策略等的制訂和實施；
7、負責協(xié)助產(chǎn)品經(jīng)理進行數(shù)據(jù)倉庫相關的需求分析、建模、寬表設計等工作；
8、負責系統(tǒng)核心代碼編寫、代碼審核和重構(gòu)，指導和培訓數(shù)據(jù)工程師、不斷進行系統(tǒng)優(yōu)化；
【任職資格】：
1、本科以上學歷，5年以上大數(shù)據(jù)研發(fā)經(jīng)驗，帶領過10人以上的大數(shù)據(jù)團隊；
2、有大型分布式系統(tǒng)設計經(jīng)驗，負責過海量數(shù)據(jù)平臺上高可用、高性能分布式系統(tǒng)的架構(gòu)設計；
3、熟悉大數(shù)據(jù)開發(fā)框架，熟悉hadoop，hbase，spark等及業(yè)界主流流處理平臺如，如storm，flunk，sparkstreaming等之一；
4、熟悉greenplum等數(shù)據(jù)倉庫技術，并有廣泛的實踐經(jīng)驗，具備維護和解決生產(chǎn)問題的能力；
5、熟悉掌握分布式存儲和nosql數(shù)據(jù)庫技術（如monogodb、redis等），有實際生產(chǎn)項目應用經(jīng)驗；
6、熟練掌握java，python，scalar中的至少一種編程語言，掌握常見的數(shù)據(jù)結(jié)構(gòu)，算法，了解軟件工程、敏捷開發(fā)等知識，熟悉常用設計模式
7、理解soa，微服務，中間件等paas相關的關鍵理念與技術，并對其有廣泛的實踐與應用經(jīng)驗，樂于。
8、有民航、電子商務、風控等大數(shù)據(jù)設計和從業(yè)經(jīng)驗者優(yōu)先。
第12篇 流媒體大數(shù)據(jù)工程師職位描述與崗位職責任職要求
職位描述：
工作職責：
1、負責直播端及服務端海量用戶行為數(shù)據(jù)的加工處理，數(shù)據(jù)洞察驅(qū)動業(yè)務優(yōu)化；
2、打造業(yè)界領先的大數(shù)據(jù)平臺，支撐數(shù)據(jù)采集，加工，建模，分析，實驗，可視化的全流程；
3、打造業(yè)界領先的分布式計算，存儲系統(tǒng)，解決大規(guī)模生產(chǎn)環(huán)境集群可用性和性能優(yōu)化問題。
任職要求：
1、熱愛計算機科學和互聯(lián)網(wǎng)技術，優(yōu)秀的編碼能力，樂于快速學習和嘗試新技術、新工具；
2、對開源大數(shù)據(jù)系統(tǒng)有相關經(jīng)驗者優(yōu)先，包括但不限于hadoop/spark/hive/flink/kafka/druid 等；
3、對數(shù)據(jù)敏感，掌握量化分析方法，善于從數(shù)據(jù)中發(fā)現(xiàn)問題者優(yōu)先。
第13篇 高級數(shù)據(jù)工程師（數(shù)倉方向）職位描述與崗位職責任職要求
職位描述：
工作職責:
1.負責全司數(shù)據(jù)的數(shù)據(jù)調(diào)研，數(shù)據(jù)模型設計，etl開發(fā)，任務監(jiān)控和優(yōu)化等
2.負責數(shù)據(jù)倉庫多場景的基礎服務層建設，如多維分析，即席查詢，實時推送等
3.負責基于數(shù)據(jù)倉庫之上的數(shù)據(jù)中臺建設，如數(shù)據(jù)管控系統(tǒng)，特征工程，指標庫等數(shù)據(jù)分析相關的通用服務
4.負責數(shù)據(jù)管理共享系統(tǒng)的設計，開發(fā)和實施；
任職資格:
1、計算機、數(shù)學相關專業(yè)全日制本科以上學歷；
2、熟悉數(shù)據(jù)治理方法論，了解數(shù)據(jù)質(zhì)量、數(shù)據(jù)模型和元數(shù)據(jù)管理等相關技術
3、5年以上具備大型數(shù)據(jù)倉庫架構(gòu)設計（離線&實時）、模型設計、etl設計的相關經(jīng)驗
4、要求至少精通一種主流的etl產(chǎn)品，如：datastage或infomatica
5、精通oracle存儲過程的開發(fā)
6、具有豐富的etl實施經(jīng)驗，熟悉金融投資行業(yè)優(yōu)先
第14篇 數(shù)據(jù)工程師（實時數(shù)據(jù)方向）職位描述與崗位職責任職要求
職位描述：
工作職責:
1.負責搭建大數(shù)據(jù)平臺數(shù)據(jù)的離線和實時分析系統(tǒng)，開發(fā)準實時數(shù)據(jù)處理任務
2.了解實時數(shù)據(jù)計算和離線數(shù)據(jù)計算相關技術，可以基于spark streaming或flink等搭建實時計算平臺，解決實時計算相關技術問題
3.參與大數(shù)據(jù)平臺的開發(fā)和維護，保證數(shù)據(jù)平臺的穩(wěn)定和可靠
任職資格:
1、計算機、數(shù)學相關專業(yè)全日制本科以上學歷；
2、熟悉java或者scala，并熟練使用其對應的常用框架spring/mybatis等;
3、熟悉主流大數(shù)據(jù)處理技術，如：hadoop、hbase、hive、spark等;
4、熟悉實時數(shù)據(jù)處理運行機制和體系結(jié)構(gòu)，具備使用spark streaming或flink等實時引擎進行數(shù)據(jù)流開發(fā)和調(diào)優(yōu)的經(jīng)驗;
5、熟悉sql開發(fā)；熟悉linu_系統(tǒng)環(huán)境，熟練使用shell腳本
第15篇 數(shù)據(jù)工程師（data engineer）職位描述與崗位職責任職要求
職位描述：
崗位職責：
建立基礎設施，收集大量原始數(shù)據(jù)并處理成適合分析的數(shù)據(jù)
在大量數(shù)據(jù)的基礎上設計和實施近實時數(shù)據(jù)應用程序
支持業(yè)務團隊的操作監(jiān)控請求
任職要求：
碩士/學士學位，在相關領域擁有1-2年的工作經(jīng)驗
熟練掌握java， python 或scala;熟練使用linu_
bash
熟悉云計算平臺（alicloud / aws)
具有大數(shù)據(jù)平臺/編程經(jīng)驗（hadoop / spark )
具有數(shù)據(jù)庫使用經(jīng)驗（oracle / mysql / mongodb），精通sql數(shù)據(jù)庫和sql編程
加分項：
良好的英語口頭和書面溝通能力
