數(shù)據(jù)倉庫工程師的崗位職責
在當下社會,崗位職責對人們來說越來越重要,崗位職責主要強調(diào)的是在工作范圍內(nèi)所應盡的責任。那么制定崗位職責真的很難嗎?以下是小編收集整理的數(shù)據(jù)倉庫工程師的崗位職責,僅供參考,歡迎大家閱讀。
數(shù)據(jù)倉庫工程師的崗位職責1
職責:
1.負責企業(yè)級數(shù)據(jù)倉庫設(shè)計、規(guī)劃、建設(shè)、實施、管理,數(shù)據(jù)倉庫架構(gòu)設(shè)計與數(shù)據(jù)開發(fā),創(chuàng)建數(shù)據(jù)倉庫、數(shù)據(jù)集市
2.熟悉數(shù)據(jù)倉庫領(lǐng)域知識,從架構(gòu)和技術(shù)層面參與建設(shè)數(shù)據(jù)倉庫,包括元數(shù)據(jù)管理、數(shù)據(jù)質(zhì)量、主數(shù)據(jù)管理、性能優(yōu)化和調(diào)優(yōu)。
3.負責數(shù)據(jù)倉庫平臺相關(guān)數(shù)據(jù)管理工作,如研發(fā)規(guī)范、質(zhì)量規(guī)范、保障規(guī)范的制定與推動實施落地
4.配合和協(xié)助數(shù)據(jù)分析/數(shù)據(jù)挖掘形成底層/中間層的`業(yè)務(wù)邏輯切片
任職資格:
1. 本科或碩士以上學歷,計算機工程相關(guān)專業(yè)
2. 熟悉大數(shù)據(jù)相關(guān)技術(shù)能力(Hadoop/MapReduce/Hive/Hbase等),熟練進行數(shù)倉Hive建設(shè)和軟件架構(gòu),較強的數(shù)據(jù)抽象能力
3.精通SQL,具備海量數(shù)據(jù)處理和Hive/Spark性能調(diào)優(yōu)經(jīng)驗,3年以上大規(guī)模分布式數(shù)據(jù)倉庫建設(shè)經(jīng)驗
4.熟練使用Druid/Kylin之一進行數(shù)據(jù)挖掘模型設(shè)計,熟練掌握Java/Scala之一,具備良好的coding素養(yǎng)和習慣,了解腳本語言,如Python、Shell等
5.強烈的責任心,工作態(tài)度積極主動,有較好的團隊精神和溝通能力,工作細致認真
數(shù)據(jù)倉庫工程師的崗位職責2
職責:
1、負責公司數(shù)據(jù)倉庫/數(shù)據(jù)集市模型設(shè)計,優(yōu)化現(xiàn)有數(shù)據(jù)倉庫模型;
2、參與數(shù)據(jù)倉庫支持工具設(shè)計;
3、參與數(shù)據(jù)倉庫需求定義;
4、參與數(shù)據(jù)治理、元數(shù)據(jù)建設(shè)、優(yōu)化數(shù)據(jù)開發(fā)流程。
任職資格:
1、計算機、數(shù)學、統(tǒng)計或相關(guān)專業(yè)本科及以上學歷,數(shù)據(jù)挖掘/平臺和BI分析領(lǐng)域優(yōu)先;
2、 3年及以上數(shù)據(jù)倉庫設(shè)計開發(fā)經(jīng)驗;
3、熟悉HIVE,有HQL使用經(jīng)驗者優(yōu)先;
4、精通數(shù)據(jù)倉庫建模方法,對kimball維度建模理論有深入的`了解;
5、有實際數(shù)倉建設(shè)項目負責人經(jīng)驗者優(yōu)先;
6、熟悉Hadoop生態(tài)圈以及大數(shù)據(jù)環(huán)境的OLAP框架者優(yōu)先。
數(shù)據(jù)倉庫工程師的崗位職責3
職責:
1.建設(shè)公司級數(shù)據(jù)倉庫,并根據(jù)業(yè)務(wù)變化持續(xù)迭代和優(yōu)化;
2.對業(yè)務(wù)數(shù)據(jù)進行梳理和抽象,建設(shè)數(shù)據(jù)倉庫的數(shù)據(jù)模型;
3.對業(yè)務(wù)數(shù)據(jù)進行采集、清洗、轉(zhuǎn)換和存儲;
4.支撐BI、用戶數(shù)據(jù)、用戶運營、用戶畫像、房源數(shù)據(jù)、推薦系統(tǒng)等核心數(shù)據(jù)平臺產(chǎn)品;
5.研究大數(shù)據(jù)前沿技術(shù),不斷持續(xù)優(yōu)化大數(shù)據(jù)平臺,為業(yè)務(wù)提供價值。
任職資格:
1.本科及以上計算機、統(tǒng)計學、數(shù)據(jù)庫、機器學習等相關(guān)專業(yè),5年以上數(shù)據(jù)相關(guān)工作;
2.對業(yè)務(wù)數(shù)據(jù)有敏銳的理解能力,并能快速梳理和分析業(yè)務(wù)數(shù)據(jù);
3.熟練掌握SQL語言、熟悉MySQL,對Shell、Java(主要開發(fā)語言)、Python編程非常熟悉;
4.熟悉常用的ETL技術(shù)和原則;精通數(shù)據(jù)倉庫數(shù)據(jù)庫設(shè)計規(guī)范和實操;
5.熟悉Hadoop、Hive、HBase、Spark、Storm等開源平臺者優(yōu)先;
6.具有較強的.分析和解決問題的能力,良好的學習能力和團隊合作精神,追求價值實現(xiàn),認同目標管理和敏捷。
數(shù)據(jù)倉庫工程師的崗位職責4
職責:
1、負責數(shù)據(jù)庫業(yè)務(wù)程序開發(fā)(包括腳本、函數(shù)、存儲過程等),編寫數(shù)據(jù)庫設(shè)計文檔,進行SQL代碼規(guī)范審核;
2、負責數(shù)據(jù)庫庫表模型設(shè)計,數(shù)據(jù)庫架構(gòu)搭建和優(yōu)化策略,和開發(fā)人員SQL代碼開發(fā)技能提升;
3、協(xié)助進行數(shù)據(jù)提取和數(shù)據(jù)分析,負責BI系統(tǒng)后端ETL數(shù)據(jù)抽;
4、利用相關(guān)建模軟件(數(shù)據(jù)分析軟件)進行數(shù)據(jù)建模工作。
任職要求:
1、有電商行業(yè)工作經(jīng)驗,熟悉電商業(yè)務(wù)優(yōu)先;
2、工作經(jīng)驗2—5年;
3、本科及以上學歷,計算機相關(guān)專業(yè);
4、熟悉Oracle,mysql等主流數(shù)據(jù)庫,精通SQL各種查詢匯聚,具有BI/數(shù)據(jù)倉庫經(jīng)驗者優(yōu)先;
5、善于與人溝通,為人正直、誠信,有較強的事業(yè)心,對工作認真負責。
數(shù)據(jù)倉庫工程師的崗位職責5
職責:
1、負責制定數(shù)據(jù)倉庫平臺技術(shù)體系架構(gòu)、數(shù)據(jù)架構(gòu)及規(guī)范;
2、負責設(shè)計和實施公司業(yè)務(wù)數(shù)據(jù)的`實時/離線數(shù)據(jù)ETL架構(gòu)方案;
3、負責調(diào)度架構(gòu)設(shè)計與開發(fā);
4、負責數(shù)據(jù)倉庫平臺運維以及日常數(shù)據(jù)運營等管理;
5、負責關(guān)鍵技術(shù)攻關(guān);
任職要求:
1、5年以上數(shù)據(jù)倉庫項目開發(fā)經(jīng)驗,參與過數(shù)據(jù)倉庫架構(gòu)設(shè)計,對ETL開發(fā)流程、調(diào)度架構(gòu)有深入理解;
2、精通mysql、 oralce 、greenplum等至少一種數(shù)據(jù)庫,豐富的SQL性能調(diào)優(yōu)經(jīng)驗;
3、熟練使用Java、Shell、Python、Perl等至少一種腳本語言;
4、熟悉數(shù)據(jù)治理理論,數(shù)據(jù)質(zhì)量、元數(shù)據(jù)管理流程和方法;
5、了解Hadoop/Hive/HBase/Spark/Storm等技術(shù)及其生態(tài)圈;
6、溝通能力好、責任心強,具有良好的團隊合作精神和敬業(yè)精神;
數(shù)據(jù)倉庫工程師的崗位職責6
1、分析各工藝提供的工藝流程及設(shè)計規(guī)則,理解所用工藝器件的`平面和縱向結(jié)構(gòu);
2、負責模擬及數(shù);旌想娐贰㈦娫搭愲娐返娜/模塊級版圖規(guī)劃、版圖設(shè)計,版圖驗證、版圖指導;
3、能與模擬工程師緊密合作,完成版圖性能優(yōu)化,如匹配、噪音敏感性、ESD保護設(shè)計、Latch up等可靠性設(shè)計;
4、負責項目相關(guān)文檔的撰寫,完成版圖物理驗證、包括DRC、LVS、ERC、EXT,完成寄生參數(shù)提取;
5、能承擔高壓高性能模擬、混合信號模擬電路、大功率電源類IC產(chǎn)品版圖設(shè)計,tapeout等工作。
數(shù)據(jù)倉庫工程師的崗位職責7
1、維護數(shù)據(jù)庫穩(wěn)定運行,持續(xù)發(fā)現(xiàn)和解決潛在的問題;
2、負責數(shù)據(jù)庫的性能優(yōu)化,使用新技術(shù)和新架構(gòu)滿足日益增長的'業(yè)務(wù)需求;
3、負責數(shù)據(jù)庫的監(jiān)控系統(tǒng)設(shè)計,為開發(fā)團隊提供平臺支持;
4、負責數(shù)據(jù)庫的運維方面的相關(guān)工作,包括數(shù)據(jù)庫的安裝部署、壓力測試、備份恢復、知識庫管理等
5、負責數(shù)據(jù)庫進行容量規(guī)劃、架構(gòu)設(shè)計,提高業(yè)務(wù)高可用性和容災能力;
6、負責數(shù)據(jù)庫相關(guān)工作的整體規(guī)劃,提供決策建議。
數(shù)據(jù)倉庫工程師的崗位職責8
職責:
1、負責建設(shè)數(shù)據(jù)倉庫架構(gòu),包括元數(shù)據(jù)管理、ETL調(diào)度、數(shù)據(jù)集成、OLAP等子系統(tǒng)的設(shè)計和開發(fā);
2、制定和推廣數(shù)據(jù)字典,建立完善的元數(shù)據(jù)管理規(guī)范,負責數(shù)據(jù)質(zhì)量監(jiān)控設(shè)計;
3、搭建和維護數(shù)據(jù)倉庫表,解決業(yè)務(wù)人員在倉庫系統(tǒng)流程、工具使用、數(shù)據(jù)處理等遇到的問題;
4、負責數(shù)據(jù)倉庫和其它業(yè)務(wù)系統(tǒng)接口。
5、基于對數(shù)據(jù)的`理解和業(yè)務(wù)需求,對數(shù)據(jù)進行整理、分析和用戶畫像搭建。
崗位要求:
1、計算機相關(guān)專業(yè)本科及以上學歷,有2年以上數(shù)據(jù)倉庫、ETL工作經(jīng)驗;
2、熟悉SQL、Shell等相關(guān)技術(shù),有海量數(shù)據(jù)處理、ETL及任務(wù)調(diào)度優(yōu)化、數(shù)據(jù)倉庫建模等經(jīng)驗;
3、熟悉Linux環(huán)境,了解Java/Python服務(wù)端系統(tǒng)開發(fā);
4、熟悉Hadoop/Spark/Hive/Hbase/Kafka/Flume等大數(shù)據(jù)技術(shù)者優(yōu)先;
5、邏輯清晰、對數(shù)據(jù)敏感,良好的溝通能力和協(xié)作能力,敢于接受挑戰(zhàn),能夠承受壓力;
數(shù)據(jù)倉庫工程師的崗位職責9
職責:
1、負責ETL開發(fā)、作業(yè)調(diào)度和數(shù)據(jù)平臺建設(shè)
2、負責數(shù)據(jù)倉庫的設(shè)計、開發(fā)和優(yōu)化,建立結(jié)構(gòu)層次合理、靈活可擴展的'數(shù)據(jù)倉庫
3、設(shè)計并研發(fā)BI分析相關(guān)的數(shù)據(jù)產(chǎn)品
4、結(jié)合對數(shù)據(jù)的理解和業(yè)務(wù)需求,對數(shù)據(jù)進行整理、分析和挖掘
任職要求
1、計算機相關(guān)專業(yè)本科及以上學歷,有2年以上數(shù)據(jù)倉庫、ETL工作經(jīng)驗
2、有海量數(shù)據(jù)處理、ETL及作業(yè)調(diào)度優(yōu)化、數(shù)據(jù)倉庫建模等經(jīng)驗
3、熟悉Linux、SQL、Python或Java、Shell腳本,有Hadoop/Hive/Spark/HBase/Kylin/Impala等大數(shù)據(jù)技術(shù)使用經(jīng)驗
4、邏輯清晰,對數(shù)據(jù)敏感,深入了解業(yè)務(wù),具備自己獨特的想法并能提出合理的建議
數(shù)據(jù)倉庫工程師的崗位職責10
職責:
1負責大數(shù)據(jù)平臺、數(shù)據(jù)倉庫多維模型設(shè)計
2負責大數(shù)據(jù)平臺相關(guān)生產(chǎn)系統(tǒng)數(shù)據(jù)的抽取、清洗、轉(zhuǎn)換等工作
3負責BI平臺設(shè)計與報表開發(fā)工作
崗位要求:
1、精通數(shù)據(jù)倉庫建模理論,有參與過2個以上的數(shù)據(jù)倉庫建設(shè)經(jīng)驗;
2、精通ETL開發(fā),熟悉數(shù)據(jù)的抽取、常用數(shù)據(jù)腳本編寫、存儲過程的編寫;
3、熟悉BI平臺,有數(shù)據(jù)報表設(shè)計和開發(fā)經(jīng)驗;
4、熟悉SQL,掌握Oracle、PostgreSQL、MySql等至少一種主流關(guān)系數(shù)據(jù)庫;
5、具備良好的團隊協(xié)作精神,良好的.溝通能力;
6、供應鏈、物流行業(yè)數(shù)據(jù)從業(yè)經(jīng)歷者優(yōu)先。
數(shù)據(jù)倉庫工程師的崗位職責11
職責:
1.利用數(shù)據(jù)倉庫建模及相關(guān)技術(shù),參與數(shù)據(jù)倉庫模型的設(shè)計。
2.參與企業(yè)級大數(shù)據(jù)倉庫項目的落地開發(fā)。
3.參與企業(yè)級主數(shù)據(jù)管理項目的實施落地。
4.利用hadoop生態(tài)相關(guān)技術(shù),負責大數(shù)據(jù)中心的數(shù)據(jù)處理流程,包括數(shù)據(jù)清洗、融合、統(tǒng)計、挖掘等。
任職要求
1.熟悉數(shù)據(jù)倉庫產(chǎn)品,對數(shù)據(jù)處理、維度建模、數(shù)據(jù)分析等有深刻認識,具備數(shù)據(jù)倉庫架構(gòu)設(shè)計、模型設(shè)計、ETL設(shè)計的相關(guān)經(jīng)驗、熟悉數(shù)據(jù)倉庫架構(gòu),熟悉數(shù)據(jù)倉庫項目的實施流程,有一個以上企業(yè)級數(shù)據(jù)倉庫項目設(shè)計經(jīng)驗者優(yōu)先;
2.熟悉數(shù)據(jù)治理及主數(shù)據(jù)管理的'理論知識,掌握主數(shù)據(jù)管理項目的實施方法和落地過程,至少參與過一個主數(shù)據(jù)管理項目的實施落地。
3.精通JAVA、Python等編程語言;精通Oracle、Mysql等主流數(shù)據(jù)庫,精通SQL;
4.具備基于Hadoop大數(shù)據(jù)平臺開發(fā)經(jīng)驗,熟悉hadoop生態(tài)體系,熟悉Hadoop、Hbase、Hive,Spark,Impala等常用組件,進行常用的ETL開發(fā)工作;
5.熟悉常用的數(shù)據(jù)分析及數(shù)據(jù)挖掘方法及實現(xiàn);
6.具備較強的代碼能力,有較強的數(shù)據(jù)分析能力;具備優(yōu)秀的溝通能力、學習能力;
7.相關(guān)專業(yè)碩士以上學歷,或本科學歷相關(guān)工作經(jīng)驗超過2年,具有智能制造領(lǐng)域相關(guān)經(jīng)驗或背景者優(yōu)先,能力突出者可適當放寬要求。
數(shù)據(jù)倉庫工程師的崗位職責12
職責:
1、負責制定數(shù)據(jù)倉庫平臺技術(shù)體系架構(gòu)、數(shù)據(jù)架構(gòu)及規(guī)范;
2、負責設(shè)計和實施公司業(yè)務(wù)數(shù)據(jù)的實時/離線數(shù)據(jù)ETL架構(gòu)方案;
3、負責調(diào)度架構(gòu)設(shè)計與開發(fā);
4、負責數(shù)據(jù)倉庫平臺運維以及日常數(shù)據(jù)運營等管理;
5、負責關(guān)鍵技術(shù)攻關(guān);
崗位要求:
1、計算機、數(shù)學、統(tǒng)計等相關(guān)專業(yè)本科及以上學歷,3年以上數(shù)據(jù)倉庫項目開發(fā)經(jīng)驗,參與過數(shù)據(jù)倉庫架構(gòu)設(shè)計,對ETL開發(fā)流程、調(diào)度架構(gòu)有深入理解;
2、精通mysql等數(shù)據(jù)庫,豐富的`SQL性能調(diào)優(yōu)經(jīng)驗;
3、熟練使用Java、Shell等腳本語言;
4、熟悉數(shù)據(jù)治理理論,數(shù)據(jù)質(zhì)量、元數(shù)據(jù)管理流程和方法;
5、了解Hadoop/Hive/HBase/Spark/Storm等技術(shù)及其生態(tài)圈;
6、溝通能力好、責任心強,具有良好的團隊合作精神和敬業(yè)精神;
數(shù)據(jù)倉庫工程師的崗位職責13
職責:
1、負責數(shù)據(jù)倉庫建設(shè)、設(shè)計、優(yōu)化和落地
2、負責數(shù)據(jù)ETL任務(wù)開發(fā)及日常維護
3、對數(shù)據(jù)ETL任務(wù)進行性能調(diào)優(yōu)及性能瓶頸分析
4、學習新技術(shù),提高整個平臺的計算能力和效率
任職要求:
1、計算機相關(guān)專業(yè),全日制本科及以上學歷,2—5年工作經(jīng)驗
2、熟悉數(shù)據(jù)倉庫理論基礎(chǔ),對數(shù)據(jù)模型建設(shè)、應用層建設(shè)有比較豐富的'經(jīng)驗
3、熟練使用SHELL或PYTHON
4、熟悉HADOOP相關(guān)的大數(shù)據(jù)技術(shù):HDFS,MAPREDUCE,HIVE
5、能對HIVE進行性能分析及調(diào)優(yōu)
6、有MAPREDUCE開發(fā)經(jīng)驗優(yōu)先
7、良好的溝通能力、組織協(xié)調(diào)能力、應變能力,極強的責任心、學習能力。
數(shù)據(jù)倉庫工程師的崗位職責14
職責:
1、為用戶提供服務(wù)器技術(shù)服務(wù),在分公司主管和公司業(yè)務(wù)部門的領(lǐng)導下,開展技術(shù)咨詢、項目支持工作;
2、負責總公司在分公司市場開展業(yè)務(wù)所需要的技術(shù)工作;
3、協(xié)調(diào)分公司當?shù)丶夹g(shù)活動與總公司相應部門的協(xié)調(diào);
4、配合分公司完成全年的銷售任務(wù);
5、履行各業(yè)務(wù)部的技術(shù)要求,加強項目管理。
6、能夠充分了解用戶各個系統(tǒng)、存儲、服務(wù)器、網(wǎng)絡(luò)等情況,并結(jié)合高校用戶實際情況提出可行的優(yōu)化建議;、了解網(wǎng)絡(luò)相關(guān)知識,熟悉TCP/IP協(xié)議線,有調(diào)試過交換機、路由器、防火墻、各類安全產(chǎn)品經(jīng)驗優(yōu)先,有HCNP或等同以上證書優(yōu)先。
任職條件:
(1)本科以上學歷,計算機相關(guān)專業(yè),具有一年以上計算機通信等相關(guān)工作經(jīng)驗者優(yōu)先(優(yōu)秀應屆畢業(yè)生亦可);
。2)掌握存儲、服務(wù)器等技術(shù)和解決方案;
(3)具有撰寫標書的工作經(jīng)驗,從事過大型網(wǎng)絡(luò)的'設(shè)計、施工或維護工作;
。4)具有項目管理經(jīng)驗,能夠按照ISO9001及相應要求進行項目管理;
。5)具有較強的學習能力和表達能力;
數(shù)據(jù)倉庫工程師的崗位職責15
職責:
1.參與傳統(tǒng)數(shù)倉和大數(shù)據(jù)數(shù)倉日常開發(fā)工作;
2.參與大數(shù)據(jù)倉庫設(shè)計、規(guī)劃和開發(fā);
3.參與日常工作的優(yōu)化,提出建設(shè)性意見;
4.負責管理項目,負責板塊內(nèi)的'資源協(xié)調(diào)、進度管理、交付管理;
5.參與數(shù)據(jù)倉庫、數(shù)據(jù)集市體系架構(gòu)的設(shè)計、規(guī)劃與開發(fā), 參與大數(shù)據(jù)、ETL開發(fā),sql性能優(yōu)化。
任職要求:
1.全日制本科,計算機等相關(guān)專業(yè)。3年以上數(shù)倉開發(fā)經(jīng)驗,有銀行、金融從業(yè)經(jīng)驗者優(yōu)先。
2.2年以上項目管理經(jīng)驗,具備PMP證書優(yōu)先.
3.熟悉oracle/hive/spark,熟悉數(shù)據(jù)處理和性能優(yōu)化,有UDF自定義函數(shù)、MR開發(fā)經(jīng)驗優(yōu)先;
4.熟悉常用ETL工具,熟悉常用的Linux指令,熟悉shell/python任意一種腳本語言。
【數(shù)據(jù)倉庫工程師的崗位職責】相關(guān)文章:
數(shù)據(jù)倉庫工程師崗位職責03-13
數(shù)據(jù)倉庫工程師崗位職責 (15篇)03-13
ERP系統(tǒng)中數(shù)據(jù)倉庫的應用11-11
工程師的崗位職責01-04
工程師崗位職責07-07
工程師崗位職責01-09
IT工程師崗位職責10-03
工藝工程師工程師崗位職責12-21