大數(shù)據(jù)架構(gòu)師任職要求10篇

第1篇 大數(shù)據(jù)架構(gòu)師崗位職責(zé)

大數(shù)據(jù)平臺(tái)架構(gòu)師 ne_ttao 上海復(fù)兆信息技術(shù)有限公司,ne_ttao,復(fù)兆,復(fù)兆 職責(zé)描述:

1、負(fù)責(zé)大數(shù)據(jù)平臺(tái)框架的規(guī)劃設(shè)計(jì)、搭建、優(yōu)化和運(yùn)維;

2、負(fù)責(zé)架構(gòu)持續(xù)優(yōu)化及系統(tǒng)關(guān)鍵模塊的設(shè)計(jì)開(kāi)發(fā),協(xié)助團(tuán)隊(duì)解決開(kāi)發(fā)過(guò)程中的技術(shù)難題;

3、負(fù)責(zé)大數(shù)據(jù)相關(guān)新技術(shù)的調(diào)研,關(guān)注大數(shù)據(jù)技術(shù)發(fā)展趨勢(shì)、研究開(kāi)源技術(shù)、將新技術(shù)應(yīng)用到大數(shù)據(jù)平臺(tái),推動(dòng)數(shù)據(jù)平臺(tái)發(fā)展;

4、負(fù)責(zé)數(shù)據(jù)平臺(tái)開(kāi)發(fā)規(guī)范制定,數(shù)據(jù)建模及核心框架開(kāi)發(fā)。

任職要求:

1、計(jì)算機(jī)、數(shù)學(xué)等專業(yè)本科及以上學(xué)歷;

2、具有5年及以上大數(shù)據(jù)相關(guān)工作經(jīng)驗(yàn);

3、具有扎實(shí)的大數(shù)據(jù)和數(shù)據(jù)倉(cāng)庫(kù)的理論功底,負(fù)責(zé)過(guò)大數(shù)據(jù)平臺(tái)或數(shù)據(jù)倉(cāng)庫(kù)設(shè)計(jì);

4、基于hadoop的大數(shù)據(jù)體系有深入認(rèn)識(shí),具備相關(guān)產(chǎn)品(hadoop、hive、hbase、spark、storm、 flume、kafka、es等)項(xiàng)目應(yīng)用研發(fā)經(jīng)驗(yàn),有hadoop集群搭建和管理經(jīng)驗(yàn);

5、熟悉傳統(tǒng)數(shù)據(jù)倉(cāng)庫(kù)數(shù)據(jù)建模,etl架構(gòu)和開(kāi)發(fā)流程,使用過(guò)kettle、talend、informatic等至少一種工具;

6、自驅(qū)力強(qiáng)、優(yōu)秀的團(tuán)隊(duì)意識(shí)和溝通能力,對(duì)新技術(shù)有好奇心,學(xué)習(xí)能力和主動(dòng)性強(qiáng),有鉆研精神,充滿激情,樂(lè)于接受挑戰(zhàn);

第2篇 資深大數(shù)據(jù)架構(gòu)師職位描述與崗位職責(zé)任職要求

職位描述：

職責(zé)描述：

1、負(fù)責(zé)大數(shù)據(jù)平臺(tái)架構(gòu)的評(píng)估、規(guī)劃和設(shè)計(jì)；

2、分布式存儲(chǔ)、流式/實(shí)時(shí)計(jì)算等應(yīng)用層架構(gòu)搭建及核心代碼實(shí)現(xiàn)；

3、數(shù)據(jù)采集、加工、監(jiān)控、分析、使用，可視化的全過(guò)程;

4、主流hadoop生態(tài)大數(shù)據(jù)系統(tǒng)相關(guān)組件的性能改進(jìn)、功能擴(kuò)容和故障分析;

5、解決規(guī)模增長(zhǎng)帶來(lái)的技術(shù)和業(yè)務(wù)問(wèn)題，持續(xù)建設(shè)數(shù)據(jù)平臺(tái)的分布式計(jì)算與存儲(chǔ)能力;

6、對(duì)海量數(shù)據(jù)利用多維查詢引擎，提供秒級(jí)查詢的解決方案，促進(jìn)業(yè)務(wù)發(fā)展;

任職要求：

1、統(tǒng)招本科以上學(xué)歷，至少5年以上大數(shù)據(jù)領(lǐng)域工作經(jīng)驗(yàn)；

2、熟悉分布式系統(tǒng)，有良好的java編碼基礎(chǔ)或者c++基礎(chǔ);

3、負(fù)責(zé)過(guò)大型數(shù)據(jù)平臺(tái)設(shè)計(jì)，豐富的olap系統(tǒng)經(jīng)驗(yàn)，對(duì)常見(jiàn)的olap引擎有深入研究及優(yōu)化經(jīng)驗(yàn);

4、具有良好的問(wèn)題分析和追蹤能力，具有正確的團(tuán)隊(duì)合作意識(shí)和良好的溝通能力;

5、對(duì)hadoop的大數(shù)據(jù)體系有深入認(rèn)識(shí)，對(duì)hadoop、hive、hbase、spark、flink、 kafka、es等有實(shí)際應(yīng)用研發(fā)經(jīng)驗(yàn)，讀過(guò)關(guān)鍵源碼；

6、具有數(shù)據(jù)挖掘、機(jī)器學(xué)習(xí)、推薦算法、人工智能、數(shù)學(xué)建模項(xiàng)目經(jīng)驗(yàn)者優(yōu)先；

7、有民航、在線旅游、電商類業(yè)務(wù)經(jīng)驗(yàn)者優(yōu)先；

第3篇 大數(shù)據(jù)架構(gòu)師（數(shù)據(jù)中臺(tái)）職位描述與崗位職責(zé)任職要求

職位描述：

崗位描述：

1.負(fù)責(zé)公司數(shù)據(jù)工廠建設(shè)，業(yè)務(wù)領(lǐng)域核心數(shù)據(jù)體系的規(guī)劃設(shè)計(jì)，在數(shù)據(jù)化運(yùn)營(yíng)和數(shù)據(jù)能力產(chǎn)品化等方向上，制定數(shù)據(jù)技術(shù)和服務(wù)的策略；

2.規(guī)劃設(shè)計(jì)數(shù)據(jù)服務(wù)工具，提升數(shù)據(jù)研發(fā)的工作效率，搭建數(shù)據(jù)服務(wù)的工具/產(chǎn)品，賦能業(yè)務(wù)同學(xué)和業(yè)務(wù)產(chǎn)品，靈活支撐業(yè)務(wù)的創(chuàng)新和探索，讓數(shù)據(jù)價(jià)值更浸透；

3.負(fù)責(zé)數(shù)據(jù)質(zhì)量、穩(wěn)定性等數(shù)據(jù)管理，數(shù)據(jù)內(nèi)部共享融通的數(shù)據(jù)平臺(tái)，讓數(shù)據(jù)標(biāo)準(zhǔn)更規(guī)范、數(shù)據(jù)獲取更高效；

崗位要求：

1. 5年以上數(shù)據(jù)開(kāi)發(fā)崗位的經(jīng)驗(yàn)，對(duì)數(shù)據(jù)倉(cāng)庫(kù)、數(shù)據(jù)平臺(tái)、數(shù)據(jù)分析、數(shù)據(jù)挖掘、深度學(xué)習(xí)、nlp等領(lǐng)域有深刻的理解，豐富的數(shù)據(jù)架構(gòu)經(jīng)驗(yàn)，精通數(shù)據(jù)建模及etl設(shè)計(jì)開(kāi)發(fā)；有較為系統(tǒng)的海量數(shù)據(jù)性能處理經(jīng)驗(yàn)；有前瞻性的整套數(shù)據(jù)管理、數(shù)據(jù)服務(wù)等解決方案的規(guī)劃和落地經(jīng)驗(yàn)尤佳；

2. 對(duì)公司業(yè)務(wù)有整體的理解，對(duì)數(shù)據(jù)業(yè)務(wù)場(chǎng)景非常敏感，能夠有效結(jié)合業(yè)務(wù)和技術(shù)創(chuàng)新，全局地規(guī)劃或完善數(shù)據(jù)服務(wù)體系以解決業(yè)務(wù)/產(chǎn)品的問(wèn)題；

3. 具有大型跨部門的復(fù)雜項(xiàng)目或者技術(shù)領(lǐng)域的管理經(jīng)驗(yàn)，有成熟的團(tuán)隊(duì)梯隊(duì)建設(shè)經(jīng)驗(yàn)和技能儲(chǔ)備的思路；

4. 具備創(chuàng)新精神，邏輯思維能力強(qiáng)，商業(yè)嗅覺(jué)敏銳者優(yōu)先；

第4篇 big data architect 大數(shù)據(jù)架構(gòu)師職位描述與崗位職責(zé)任職要求

職位描述：

responsibilities

?project delivery

?understand， analyze the customer requirements， and design the corresponding solution

?assist clients in the definition of the information architecture， to enable and leverage business analytics capabilities， starting from client＇s requirements to define the strategic approach to design big data architectures

?keep a close communication with clients and implementation team， clarify the question and doubt on both side， guarantee the project carried forward smoothly

?deal with the other project issue according to the project condition.

?project preparation

?coordinate with other team to prepare for the new opportunities and give the necessary support

?knowledge obtaining and sharing

?keep desire to learn new technology， follow up the trend， and review and share the new knowledge regularly.

requirements

?basic requirement

?bachelor’s degree

?e_cellent communication skills (english & mandarin)

?technical skills

?substantial e_pertise in advanced analytics technologies & solutions (incl. spss， sas， r， tableau， qlikview)

?proven practical e_pertise in big data projects with hadoop ecosystem， nosql or cloud data management technologies， master to basic technical operation including but not limit to linu_， shell， sql， python etc.

?good understanding to data model design， business analysis and data process， familiar with basic data process method and be able to handle the practical operation.

?soft skills

?strong problem solving attitude and proactive behavior to growth

?proven ability as a team leader with responsibility of defining customer needs and designing client’s solutions

?e_perience

?e_perience in /as an architect in the data warehousing and bi structure (incl. sql / data modelling， data integration， data governance) for several projects

第5篇 高級(jí)大數(shù)據(jù)架構(gòu)師職位描述與崗位職責(zé)任職要求

職位描述：

崗位職責(zé)

1. 負(fù)責(zé)樂(lè)播私有云及大數(shù)據(jù)系統(tǒng)的規(guī)劃和架構(gòu)工作，主導(dǎo)系統(tǒng)的架構(gòu)設(shè)計(jì)和核心模塊開(kāi)發(fā)，確保項(xiàng)目質(zhì)量和關(guān)鍵性能指標(biāo)達(dá)成；

2.負(fù)責(zé)面向pb量級(jí)的數(shù)據(jù)查詢、數(shù)據(jù)計(jì)算、數(shù)據(jù)存儲(chǔ)以及數(shù)據(jù)模型與管理的總體架構(gòu)與優(yōu)化，提升數(shù)據(jù)查詢的響應(yīng)效率；

3.負(fù)責(zé)平臺(tái)數(shù)據(jù)建模和設(shè)計(jì)工作，數(shù)據(jù)抽取，數(shù)據(jù)清洗，數(shù)據(jù)建模工作，具有etl設(shè)計(jì)與開(kāi)發(fā)，數(shù)據(jù)質(zhì)量保障，元數(shù)據(jù)管理，指標(biāo)體系建立；

4.負(fù)責(zé)研發(fā)技術(shù)發(fā)展方向，新技術(shù)領(lǐng)域的探索，將新技術(shù)應(yīng)用到項(xiàng)目；

任職資格：

1. 本科及以上學(xué)歷，5年以上大數(shù)據(jù)平臺(tái)架構(gòu)經(jīng)驗(yàn)，有多個(gè)數(shù)據(jù)產(chǎn)品開(kāi)發(fā)和實(shí)施經(jīng)驗(yàn)；

2. 熟悉bi平臺(tái)架構(gòu)，大數(shù)據(jù)解決方案及hadoop、spark大數(shù)據(jù)相關(guān)技術(shù)，熟悉分布式系統(tǒng)基礎(chǔ)設(shè)施中常用的技術(shù)，如緩存、消息中間件、搜索引擎等，有實(shí)踐經(jīng)驗(yàn)者優(yōu)先；

3.精通java語(yǔ)言以及j2ee平臺(tái)特性，熟悉常用的設(shè)計(jì)模式和開(kāi)源框架，有大型互聯(lián)網(wǎng)項(xiàng)目經(jīng)驗(yàn)或業(yè)內(nèi)知名產(chǎn)品研發(fā)經(jīng)驗(yàn)者優(yōu)先；

4.精通面向?qū)ο蠓治龊驮O(shè)計(jì)，并能熟練運(yùn)用建模工具進(jìn)行設(shè)計(jì)工作，且能夠指導(dǎo)初中級(jí)人員進(jìn)行開(kāi)發(fā)和設(shè)計(jì)工作；

5. 深刻理解數(shù)據(jù)結(jié)構(gòu)和算法設(shè)計(jì)，有系統(tǒng)分析和設(shè)計(jì)實(shí)踐經(jīng)驗(yàn)；

第6篇 航空業(yè)務(wù)-大數(shù)據(jù)架構(gòu)師職位描述與崗位職責(zé)任職要求

職位描述：

崗位職責(zé)：

1. 負(fù)責(zé)民航大數(shù)據(jù)系統(tǒng)架構(gòu)的整體規(guī)劃、設(shè)計(jì)與研發(fā)；

2. 針對(duì)電子商務(wù)、在線營(yíng)銷等領(lǐng)域開(kāi)展深入的數(shù)據(jù)挖掘和數(shù)據(jù)分析，構(gòu)建大數(shù)據(jù)基礎(chǔ)架構(gòu)，優(yōu)化建模，采集和處理海量數(shù)據(jù)，規(guī)劃基于云服務(wù)的高效、可靠的數(shù)據(jù)訪問(wèn)能力；

3. 負(fù)責(zé)大數(shù)據(jù)服務(wù)平臺(tái)的研發(fā)，帶領(lǐng)團(tuán)隊(duì)獨(dú)立完成大數(shù)據(jù)產(chǎn)品的設(shè)計(jì)與開(kāi)發(fā)，解決技術(shù)開(kāi)發(fā)過(guò)程中的技術(shù)難題。

職位要求：

1. 具備數(shù)據(jù)倉(cāng)庫(kù)理論和實(shí)踐經(jīng)驗(yàn)，熟悉hadoop、spark等大數(shù)據(jù)相關(guān)技術(shù)，熟悉分布式系統(tǒng)基礎(chǔ)設(shè)施中常用的技術(shù)，如緩存、消息中間件、搜索引擎等，有機(jī)器學(xué)習(xí)、推薦引擎、決策引擎等項(xiàng)目經(jīng)驗(yàn)；

2. 熟悉web應(yīng)用，移動(dòng)應(yīng)用，桌面應(yīng)用等用戶行為分析模型，精通java語(yǔ)言以及j2ee平臺(tái)特性，熟悉常用的設(shè)計(jì)模式和開(kāi)源框架；

3. 有基于公有云、私有云的應(yīng)用架構(gòu)的項(xiàng)目經(jīng)驗(yàn)，具備高可用性、高性能性、高擴(kuò)展系統(tǒng)設(shè)計(jì)經(jīng)驗(yàn)，對(duì)高并發(fā)系統(tǒng)架構(gòu)設(shè)計(jì)有深刻理解；

4. 本科以上學(xué)歷，5年以上大數(shù)據(jù)或大型項(xiàng)目架構(gòu)設(shè)計(jì)經(jīng)驗(yàn)；

5. 具備民航、旅游業(yè)相關(guān)行業(yè)經(jīng)驗(yàn)有限；

6. 較好的英文溝通能力。

第7篇 民航大數(shù)據(jù)架構(gòu)師職位描述與崗位職責(zé)任職要求

職位描述：

崗位職責(zé)：

1. 負(fù)責(zé)民航大數(shù)據(jù)系統(tǒng)架構(gòu)的整體規(guī)劃、設(shè)計(jì)與研發(fā)；

2. 針對(duì)電子商務(wù)、在線營(yíng)銷等領(lǐng)域開(kāi)展深入的數(shù)據(jù)挖掘和數(shù)據(jù)分析，構(gòu)建大數(shù)據(jù)基礎(chǔ)架構(gòu)，優(yōu)化建模，采集和處理海量數(shù)據(jù)，規(guī)劃基于云服務(wù)的高效、可靠的數(shù)據(jù)訪問(wèn)能力；

3. 負(fù)責(zé)大數(shù)據(jù)服務(wù)平臺(tái)的研發(fā)，帶領(lǐng)團(tuán)隊(duì)獨(dú)立完成大數(shù)據(jù)產(chǎn)品的設(shè)計(jì)與開(kāi)發(fā)，解決技術(shù)開(kāi)發(fā)過(guò)程中的技術(shù)難題。

職位要求：

1. 具備數(shù)據(jù)倉(cāng)庫(kù)理論和實(shí)踐經(jīng)驗(yàn)，熟悉hadoop、spark等大數(shù)據(jù)相關(guān)技術(shù)，熟悉分布式系統(tǒng)基礎(chǔ)設(shè)施中常用的技術(shù)，如緩存、消息中間件、搜索引擎等，有機(jī)器學(xué)習(xí)、推薦引擎、決策引擎等項(xiàng)目經(jīng)驗(yàn)；

2. 熟悉web應(yīng)用，移動(dòng)應(yīng)用，桌面應(yīng)用等用戶行為分析模型，精通java語(yǔ)言以及j2ee平臺(tái)特性，熟悉常用的設(shè)計(jì)模式和開(kāi)源框架；

3. 有基于公有云、私有云的應(yīng)用架構(gòu)的項(xiàng)目經(jīng)驗(yàn)，具備高可用性、高性能性、高擴(kuò)展系統(tǒng)設(shè)計(jì)經(jīng)驗(yàn)，對(duì)高并發(fā)系統(tǒng)架構(gòu)設(shè)計(jì)有深刻理解；

4. 本科以上學(xué)歷，5年以上大數(shù)據(jù)或大型項(xiàng)目架構(gòu)設(shè)計(jì)經(jīng)驗(yàn)；

5. 具備民航、旅游業(yè)相關(guān)行業(yè)經(jīng)驗(yàn)有限；

6. 較好的英文溝通能力。

第8篇 大數(shù)據(jù)架構(gòu)師職位描述與崗位職責(zé)任職要求

職位描述：

崗位描述：

1. 制定公司的大數(shù)據(jù)發(fā)展（數(shù)據(jù)驅(qū)動(dòng)、數(shù)據(jù)中臺(tái)）規(guī)劃、技術(shù)發(fā)展路線，建設(shè)合理的數(shù)據(jù)倉(cāng)庫(kù)架構(gòu)；

2. 分析業(yè)界大數(shù)據(jù)技術(shù)使用情況，研究未來(lái)數(shù)據(jù)模型和計(jì)算框架的創(chuàng)新與落地；

3. 領(lǐng)導(dǎo)數(shù)據(jù)資產(chǎn)管理和系統(tǒng)化的數(shù)據(jù)模型建設(shè)；

4. 提升團(tuán)隊(duì)大數(shù)據(jù)能力，塑造團(tuán)隊(duì)在行業(yè)的技術(shù)影響力；

5. 對(duì)公司其他團(tuán)隊(duì)普及大數(shù)據(jù)技術(shù)能力，并帶領(lǐng)團(tuán)隊(duì)提供大數(shù)據(jù)使用能力。

崗位要求：

1. 計(jì)算機(jī)/應(yīng)用數(shù)學(xué)等相關(guān)專業(yè)、全日制本科及以上學(xué)歷；

2. 具有7年以上大數(shù)據(jù)架構(gòu)工作經(jīng)驗(yàn)，擁有3年以上大型互聯(lián)網(wǎng)公司相關(guān)經(jīng)驗(yàn)優(yōu)先；

3. 具有很強(qiáng)的數(shù)據(jù)設(shè)計(jì)抽象能力，具有海量數(shù)據(jù)、復(fù)雜業(yè)務(wù)的治理和管理經(jīng)驗(yàn)；

4. 熟悉大數(shù)據(jù)架構(gòu)與生態(tài)圈技術(shù)（如：hive、hbase、storm、kafka、es、kylin等）；

5. 熟悉大數(shù)據(jù)技術(shù)演變歷史，并能夠總結(jié)發(fā)展特點(diǎn)；

6. 對(duì)數(shù)據(jù)挖掘、分析、算法、工程化、ai等技術(shù)了解者優(yōu)先；

7. 具備良好的溝通協(xié)調(diào)能力、快速學(xué)習(xí)能力， 強(qiáng)烈的工作主動(dòng)性和責(zé)任心，且熱愛(ài)技術(shù)、具有鉆研精神；

第9篇 大數(shù)據(jù)架構(gòu)師崗位職責(zé)大數(shù)據(jù)架構(gòu)師職責(zé)任職要求

大數(shù)據(jù)架構(gòu)師崗位職責(zé)

工作職責(zé):

負(fù)責(zé)大數(shù)據(jù)開(kāi)發(fā)、數(shù)據(jù)挖掘、算法平臺(tái)的技術(shù)架構(gòu)及建設(shè);

負(fù)責(zé)大數(shù)據(jù)實(shí)時(shí)檢索分析平臺(tái)的架構(gòu)和建設(shè);

負(fù)責(zé)pcg業(yè)務(wù)算法推薦，實(shí)時(shí)流計(jì)算框架的研發(fā)優(yōu)化;

跟蹤移動(dòng)互聯(lián)網(wǎng)開(kāi)源大數(shù)據(jù)框架、新算法框架的技術(shù)選型及平臺(tái)化預(yù)研及架構(gòu);

負(fù)責(zé)業(yè)務(wù)挖掘、算法應(yīng)用的平臺(tái)支持;

負(fù)責(zé)>;5人的技術(shù)或ft團(tuán)隊(duì)管理。

任職要求:

5年以上系統(tǒng)建設(shè)，設(shè)計(jì)，架構(gòu)經(jīng)驗(yàn);4年以上大數(shù)據(jù)系統(tǒng)開(kāi)發(fā)，設(shè)計(jì)，架構(gòu)經(jīng)驗(yàn);3年以上軟件工程管理經(jīng)驗(yàn);

熟悉商業(yè)智能系統(tǒng)，熟悉數(shù)據(jù)倉(cāng)庫(kù)，熟悉數(shù)據(jù)集市;

熟悉大數(shù)據(jù)相關(guān)技術(shù):hadoop， hive， hbase， zookeeper， spark， cassandra， mapreduce;并閱讀過(guò)相關(guān)源碼;

管理過(guò)數(shù)據(jù)量上t級(jí)別，節(jié)點(diǎn)數(shù)300以上的大數(shù)據(jù)集群，開(kāi)發(fā)，優(yōu)化并管理過(guò)上t級(jí)別的大數(shù)據(jù)作業(yè);

熟悉常用機(jī)器學(xué)習(xí)算法，了解深度學(xué)習(xí)，強(qiáng)化學(xué)習(xí)，遷移學(xué)習(xí)算法，了解相關(guān)原理(ff， bf， sgd等);

熟悉各種抽樣方法(分層，過(guò)抽樣等)，特征處理方法(缺失值處理，離散化等);

熟悉機(jī)器學(xué)習(xí)框架或工具(spark mllib，tensorflow， caffe等)，了解源碼并能應(yīng)用項(xiàng)目;

具備大數(shù)據(jù)云平臺(tái)、計(jì)算存儲(chǔ)平臺(tái)、可視化開(kāi)發(fā)平臺(tái)經(jīng)驗(yàn)，具備中大型成功項(xiàng)目經(jīng)驗(yàn)優(yōu)先;具備大規(guī)模分布式計(jì)算平臺(tái)的使用和并行算法的開(kāi)發(fā)經(jīng)驗(yàn)，對(duì)大數(shù)據(jù)處理及應(yīng)用有濃厚興趣;

具備較強(qiáng)的團(tuán)隊(duì)管理能力和溝通能力，思維活躍，前瞻學(xué)習(xí)能力強(qiáng);

了解軟件項(xiàng)目管理、敏捷管理方法論，在中大型項(xiàng)目中有所實(shí)踐。

第10篇 首席大數(shù)據(jù)架構(gòu)師職位描述與崗位職責(zé)任職要求

職位描述：

職責(zé)描述：

1、負(fù)責(zé)公司大數(shù)據(jù)平臺(tái)系統(tǒng)架構(gòu)設(shè)計(jì)、核心開(kāi)發(fā)工作（hadoop生態(tài)圈），基于業(yè)務(wù)場(chǎng)景設(shè)計(jì)最優(yōu)的系統(tǒng)解決方案。

2、構(gòu)架大數(shù)據(jù)開(kāi)發(fā)平臺(tái)，包括數(shù)據(jù)采集、數(shù)據(jù)存儲(chǔ)、數(shù)據(jù)計(jì)算、數(shù)據(jù)管理的平臺(tái)系統(tǒng)及相關(guān)監(jiān)控，推進(jìn)平臺(tái)的架構(gòu)設(shè)計(jì)和實(shí)現(xiàn)。

3、利用hadoop、spark、flink等大數(shù)據(jù)技術(shù)對(duì)海量數(shù)據(jù)進(jìn)行處理，支持建模（算法）的工程化實(shí)現(xiàn)，實(shí)現(xiàn)可視化bi分析。

4、對(duì)現(xiàn)有系統(tǒng)的進(jìn)行架構(gòu)深入分析及系統(tǒng)優(yōu)化，進(jìn)一步提升系統(tǒng)的性能及數(shù)據(jù)處理能力。

5、了解機(jī)器學(xué)習(xí)等技術(shù)進(jìn)行數(shù)據(jù)分析及建模的方案的系統(tǒng)化設(shè)計(jì)，跟進(jìn)數(shù)據(jù)挖掘項(xiàng)目的架構(gòu)設(shè)計(jì)工作。

6、解決部門遇到的技術(shù)難題，能夠進(jìn)行技術(shù)和培訓(xùn)。

任職要求：

1、統(tǒng)招本科或以上學(xué)歷，計(jì)算機(jī)相關(guān)專業(yè)， 2年以上大數(shù)據(jù)項(xiàng)目經(jīng)驗(yàn)、3年以上架構(gòu)經(jīng)驗(yàn)。

2、熟練使用cdh、hdp、fi等hadoop生態(tài)系統(tǒng)發(fā)行版套件，進(jìn)行平臺(tái)服務(wù)的安裝、部署和維護(hù)。

3、具備較豐富的基于hadoop生態(tài)圈的大數(shù)據(jù)處理項(xiàng)目經(jīng)驗(yàn)，熟悉數(shù)倉(cāng)建設(shè)、數(shù)據(jù)中臺(tái)建設(shè)

4、熟悉hadoop、hive、hbase、kafka、spark、flink、es、flume、sqoop、ozzie、tez、hue、azkanban、data_等大數(shù)據(jù)組件的使用和調(diào)優(yōu)，了解數(shù)據(jù)分析和數(shù)據(jù)挖掘。

5、深刻理解大數(shù)據(jù)平臺(tái)安全機(jī)制kerberos、ranger以及血緣分析套件atlas。

6、熟悉大數(shù)據(jù)應(yīng)用開(kāi)發(fā)平臺(tái)的架構(gòu)和設(shè)計(jì)，對(duì)數(shù)據(jù)采集、數(shù)據(jù)清洗、數(shù)據(jù)治理、數(shù)據(jù)質(zhì)量管理、數(shù)據(jù)血緣分析、數(shù)據(jù)存儲(chǔ)、作業(yè)調(diào)度、數(shù)據(jù)安全、數(shù)據(jù)分析有豐富的經(jīng)驗(yàn)。

7、優(yōu)秀的團(tuán)隊(duì)合作精神、誠(chéng)實(shí)、勤奮、嚴(yán)謹(jǐn)，敢于接受挑戰(zhàn)。

8、機(jī)器學(xué)習(xí)技術(shù)、數(shù)據(jù)挖掘經(jīng)驗(yàn)豐富者優(yōu)先考慮。