數(shù)據(jù)倉庫工程師的崗位職責(zé)表述
數(shù)據(jù)倉庫工程師的崗位職責(zé)表述
數(shù)據(jù)倉庫工程師負(fù)責(zé)大數(shù)據(jù)應(yīng)用類項(xiàng)目的設(shè)計(jì)和交付,能獨(dú)立和客戶對接業(yè)務(wù),并編寫需求文檔、模型設(shè)計(jì)文檔。以下是學(xué)習(xí)啦小編整理的數(shù)據(jù)倉庫工程師的崗位職責(zé)表述。
數(shù)據(jù)倉庫工程師的崗位職責(zé)表述1
職責(zé):
1. 利用數(shù)據(jù)倉庫建模及相關(guān)技術(shù),參與數(shù)據(jù)倉庫模型的設(shè)計(jì)。
2. 參與企業(yè)級大數(shù)據(jù)倉庫項(xiàng)目的落地開發(fā)。
3. 參與企業(yè)級主數(shù)據(jù)管理項(xiàng)目的實(shí)施落地。
4. 利用hadoop生態(tài)相關(guān)技術(shù),負(fù)責(zé)大數(shù)據(jù)中心的數(shù)據(jù)處理流程,包括數(shù)據(jù)清洗、融合、統(tǒng)計(jì)、挖掘等。
任職要求
1. 熟悉數(shù)據(jù)倉庫產(chǎn)品,對數(shù)據(jù)處理、維度建模、數(shù)據(jù)分析等有深刻認(rèn)識,具備數(shù)據(jù)倉庫架構(gòu)設(shè)計(jì)、模型設(shè)計(jì)、ETL設(shè)計(jì)的相關(guān)經(jīng)驗(yàn)、熟悉數(shù)據(jù)倉庫架構(gòu),熟悉數(shù)據(jù)倉庫項(xiàng)目的實(shí)施流程,有一個以上企業(yè)級數(shù)據(jù)倉庫項(xiàng)目設(shè)計(jì)經(jīng)驗(yàn)者優(yōu)先;
2. 熟悉數(shù)據(jù)治理及主數(shù)據(jù)管理的理論知識,掌握主數(shù)據(jù)管理項(xiàng)目的實(shí)施方法和落地過程,至少參與過一個主數(shù)據(jù)管理項(xiàng)目的實(shí)施落地。
3. 精通JAVA、Python等編程語言;精通Oracle、Mysql等主流數(shù)據(jù)庫,精通SQL;
4. 具備基于Hadoop大數(shù)據(jù)平臺開發(fā)經(jīng)驗(yàn),熟悉hadoop生態(tài)體系,熟悉Hadoop、Hbase、Hive,Spark,Impala等常用組件,進(jìn)行常用的ETL開發(fā)工作;
5. 熟悉常用的數(shù)據(jù)分析及數(shù)據(jù)挖掘方法及實(shí)現(xiàn);
6. 具備較強(qiáng)的代碼能力,有較強(qiáng)的數(shù)據(jù)分析能力;具備優(yōu)秀的溝通能力、學(xué)習(xí)能力;
7. 相關(guān)專業(yè)碩士以上學(xué)歷,或本科學(xué)歷相關(guān)工作經(jīng)驗(yàn)超過2年,具有智能制造領(lǐng)域相關(guān)經(jīng)驗(yàn)或背景者優(yōu)先,能力突出者可適當(dāng)放寬要求。
數(shù)據(jù)倉庫工程師的崗位職責(zé)表述2
職責(zé):
1、負(fù)責(zé)制定數(shù)據(jù)倉庫平臺技術(shù)體系架構(gòu)、數(shù)據(jù)架構(gòu)及規(guī)范;
2、負(fù)責(zé)設(shè)計(jì)和實(shí)施公司業(yè)務(wù)數(shù)據(jù)的實(shí)時/離線數(shù)據(jù)ETL架構(gòu)方案;
3、負(fù)責(zé)調(diào)度架構(gòu)設(shè)計(jì)與開發(fā);
4、負(fù)責(zé)數(shù)據(jù)倉庫平臺運(yùn)維以及日常數(shù)據(jù)運(yùn)營等管理;
5、負(fù)責(zé)關(guān)鍵技術(shù)攻關(guān);
崗位要求:
1、計(jì)算機(jī)、數(shù)學(xué)、統(tǒng)計(jì)等相關(guān)專業(yè)本科及以上學(xué)歷,3年以上數(shù)據(jù)倉庫項(xiàng)目開發(fā)經(jīng)驗(yàn),參與過數(shù)據(jù)倉庫架構(gòu)設(shè)計(jì),對ETL開發(fā)流程、調(diào)度架構(gòu)有深入理解;
2、精通mysql等數(shù)據(jù)庫,豐富的SQL性能調(diào)優(yōu)經(jīng)驗(yàn);
3、熟練使用Java、Shell等腳本語言;
4、熟悉數(shù)據(jù)治理理論,數(shù)據(jù)質(zhì)量、元數(shù)據(jù)管理流程和方法;
5、了解Hadoop/Hive/HBase/Spark/Storm等技術(shù)及其生態(tài)圈;
6、溝通能力好、責(zé)任心強(qiáng),具有良好的團(tuán)隊(duì)合作精神和敬業(yè)精神;
數(shù)據(jù)倉庫工程師的崗位職責(zé)表述3
職責(zé):
1、負(fù)責(zé)建設(shè)數(shù)據(jù)倉庫架構(gòu),包括元數(shù)據(jù)管理、ETL調(diào)度、數(shù)據(jù)集成、OLAP等子系統(tǒng)的設(shè)計(jì)和開發(fā);
2、搭建和維護(hù)數(shù)據(jù)倉庫表,解決業(yè)務(wù)人員在倉庫系統(tǒng)流程、工具使用、數(shù)據(jù)處理等遇到的問題;
3、基于對數(shù)據(jù)的理解和業(yè)務(wù)需求,對數(shù)據(jù)進(jìn)行整理、分析和挖掘。
任職資格:
1、做事耐心,有強(qiáng)烈的責(zé)任心;
2、計(jì)算機(jī),數(shù)學(xué),統(tǒng)計(jì)學(xué)相關(guān)專業(yè)本科及以上學(xué)歷,
3、熟悉主流的關(guān)系型數(shù)據(jù)庫及MPP數(shù)據(jù)庫,至少精通一門數(shù)據(jù)庫,熟悉Gbase優(yōu)先;
4、熟練使用SQL語言,具有2年及以上數(shù)據(jù)倉庫、報表系統(tǒng)等ETL開發(fā)、維護(hù)經(jīng)驗(yàn);
5、熟悉Hadoop/Spark/Hive/Hbase等大數(shù)據(jù)技術(shù)者優(yōu)先;
6、邏輯清晰、對數(shù)據(jù)敏感,良好的溝通能力和協(xié)作能力,敢于接受挑戰(zhàn),能夠承受壓力;
7、有公安相關(guān)業(yè)務(wù)經(jīng)驗(yàn)者優(yōu)先考慮。
數(shù)據(jù)倉庫工程師的崗位職責(zé)表述4
職責(zé):
1.負(fù)責(zé)業(yè)務(wù)的數(shù)倉\數(shù)據(jù)集市的建設(shè),能提煉通用需求,數(shù)倉標(biāo)準(zhǔn),實(shí)現(xiàn)高質(zhì)量的數(shù)據(jù)互通共享
2.對海量數(shù)據(jù)進(jìn)行統(tǒng)計(jì)與分析,產(chǎn)品效果評估與分析,為產(chǎn)品策略優(yōu)化迭代提供強(qiáng)有力的數(shù)據(jù)支持
3.和業(yè)務(wù)團(tuán)隊(duì)緊密合作推動數(shù)據(jù)產(chǎn)品與服務(wù)的落地,具備良好的溝通協(xié)調(diào)能力
任職要求:
1.計(jì)算機(jī) 數(shù)學(xué) 統(tǒng)計(jì), 金融等相關(guān)專業(yè)的本科或以上學(xué)歷;從事數(shù)倉領(lǐng)域至少3年以上,具備海量數(shù)據(jù)的DW模型設(shè)計(jì)與ETL開發(fā)經(jīng)驗(yàn) 2.熟悉數(shù)倉領(lǐng)域知識, 包括但不局限于:數(shù)據(jù)質(zhì)量,元數(shù)據(jù)管理,主數(shù)據(jù)管理,數(shù)據(jù)開發(fā)測試工具與方法;
3.掌握Greenplum,Oracle,Teradata,Mysql 等至少一種,靈活運(yùn)用SQL實(shí)現(xiàn)海量數(shù)據(jù)ETL加工處理;有Greenplum經(jīng)驗(yàn)優(yōu)先
4.具有數(shù)據(jù)倉庫相關(guān)開發(fā)經(jīng)驗(yàn),如ETL,建模,BI,數(shù)據(jù)產(chǎn)品等,熟悉數(shù)倉模型
5.掌握一門或多門開發(fā)語言,不限于java/python/scala等,熟悉Linux/Unix 平臺上的開發(fā)環(huán)境
6、主導(dǎo)過大型數(shù)據(jù)倉庫架構(gòu)或模型設(shè)計(jì)經(jīng)驗(yàn)者優(yōu)先;
7、較好的溝通理解能力,性格樂觀,態(tài)度踏實(shí),積極上進(jìn);
數(shù)據(jù)倉庫工程師的崗位職責(zé)表述5
職責(zé):
1. 負(fù)責(zé)數(shù)據(jù)ETL開發(fā),根據(jù)數(shù)倉層級結(jié)構(gòu)及主題域劃分,規(guī)范清洗代碼,提供準(zhǔn)確數(shù)據(jù)
2. 負(fù)責(zé)數(shù)據(jù)質(zhì)量治理,發(fā)現(xiàn)異常業(yè)務(wù)邏輯或數(shù)據(jù)質(zhì)量問題,推動業(yè)務(wù)優(yōu)化及改善。
3. 負(fù)責(zé)數(shù)據(jù)開發(fā)需求評審、結(jié)合數(shù)據(jù)分析體系制定ETL清洗方案;
任職要求:
1. 一年以上數(shù)據(jù)倉庫ETL設(shè)計(jì)及開發(fā)經(jīng)驗(yàn),有BI經(jīng)驗(yàn)者優(yōu)先
2. 熟練使用 SQL,熟悉HQL常用內(nèi)部函數(shù),有一定的 HQL性能調(diào)優(yōu)經(jīng)驗(yàn)優(yōu)先
3. 具備數(shù)據(jù)倉庫架構(gòu)設(shè)計(jì)、模型設(shè)計(jì)、ETL設(shè)計(jì),調(diào)度的相關(guān)經(jīng)驗(yàn)優(yōu)先;
4. 對數(shù)據(jù)敏感,有較強(qiáng)數(shù)據(jù)分析和解決問題能力;
5. 積極溝通,主動了解業(yè)務(wù)需求,愿意嘗試新的技術(shù)領(lǐng)域。
相關(guān)文章: