數(shù)據(jù)工程師崗位職責(zé)16篇

第1篇 推送數(shù)據(jù)工程師職位描述與崗位職責(zé)任職要求

職位描述：

工作職責(zé)：

1、負(fù)責(zé)字節(jié)跳動用戶行為的理解和建模，幫助公司各項業(yè)務(wù)滿足用戶需求，提升用戶覆蓋；

2、負(fù)責(zé)在數(shù)據(jù)建設(shè)層面，對用戶隱私進(jìn)行脫敏處理，保證后續(xù)數(shù)據(jù)研發(fā)過程中保護(hù)用戶隱私；

3、探索、挖掘公司各項指標(biāo)、用戶滿意度、用戶增長上的各項規(guī)律，并利用這些規(guī)律幫助產(chǎn)品提升和擴(kuò)展，增加用戶滿意度，擴(kuò)展用戶群體。

任職要求：

1、本科及以上學(xué)歷，計算機、統(tǒng)計學(xué)、數(shù)學(xué)等相關(guān)專業(yè)；

2、較強的編程和數(shù)據(jù)工具運用能力，有hadoop，hive，spark，kafka，elasticsearch或者其他的大數(shù)據(jù)工具的使用經(jīng)驗；

3、對數(shù)據(jù)倉庫、數(shù)據(jù)建模有一定認(rèn)知；有過數(shù)據(jù)使用相關(guān)經(jīng)驗。

第2篇 大數(shù)據(jù)開發(fā)工程師-偏數(shù)據(jù)模型方向-l80542職位描述與崗位職責(zé)任職要求

職位描述：

職責(zé)描述：

1、參與數(shù)據(jù)需求的溝通和模型設(shè)計；

2、負(fù)責(zé)大數(shù)據(jù)平臺的數(shù)據(jù)需求開發(fā)，包括實時和批量處理；

3、負(fù)責(zé)不同數(shù)據(jù)源的接入解析落地的設(shè)計開發(fā)工作；

4、負(fù)責(zé)數(shù)據(jù)質(zhì)量監(jiān)控，解決數(shù)據(jù)運行和質(zhì)量問題。

任職要求：

1、計算機本科以上學(xué)歷，至少有3年數(shù)據(jù)開發(fā)經(jīng)驗；

2、精通java/scala/python，至少有3年以上開發(fā)使用經(jīng)驗；

3、熟悉spark，hive，flink，jstorm等大數(shù)據(jù)實時計算技術(shù)；

4、掌握hive sql，sparksql，es query dsl 等查詢語言；擁有sql性能調(diào)優(yōu)經(jīng)驗；

5、具有較強的業(yè)務(wù)理解能力，較強的責(zé)任心、團(tuán)隊合作能力和溝通能力；

6、有過圖數(shù)據(jù)庫開發(fā)或spark mllib開發(fā)經(jīng)驗者優(yōu)先考慮。

第3篇 數(shù)據(jù)通信系統(tǒng)工程師崗位職責(zé)數(shù)據(jù)通信系統(tǒng)工程師職責(zé)任職要求

數(shù)據(jù)通信系統(tǒng)工程師崗位職責(zé)

1、通信、電子、計算機等相關(guān)專業(yè);2、有較扎實的通信知識，具備良好的溝通、理解與語言表達(dá)能力;3、有高度的責(zé)任心、有較強的團(tuán)隊協(xié)作和客戶服務(wù)意識，能較好完成團(tuán)隊內(nèi)部各項工作，能承受一定工作壓力;4、了解通信行業(yè)標(biāo)準(zhǔn)和規(guī)范，能編制通信工程概預(yù)算，熟練使用cad、visio等工程設(shè)計軟件者;5、熟悉電信運營商網(wǎng)絡(luò)環(huán)境(核心網(wǎng)、增值業(yè)務(wù)、城域網(wǎng))，有從事運營商數(shù)據(jù)平臺規(guī)劃設(shè)計者優(yōu)先;6、熟悉服務(wù)器、存儲、網(wǎng)絡(luò)、信息安全、軟件開發(fā)，有系統(tǒng)集成經(jīng)驗者優(yōu)先;7、熟練使用visio、cad、word、e_cel、ppt等軟件，有技術(shù)方案編撰能力;8、語言表達(dá)能力強、溝通能力強，能夠獨立承擔(dān)客戶溝通、方案講解等工作任務(wù);

第4篇 數(shù)據(jù)集成工程師崗位職責(zé)

數(shù)據(jù)集成/etl工程師 深圳知匯科技有限公司 深圳知匯科技有限公司,知匯 職責(zé)描述:1、分析醫(yī)院業(yè)務(wù)數(shù)據(jù)及數(shù)據(jù)流,參與數(shù)據(jù)模型的設(shè)計;

2、負(fù)責(zé)數(shù)據(jù)集成腳本開發(fā)、etl開發(fā),對醫(yī)院信息系統(tǒng)數(shù)據(jù)進(jìn)行提取、清洗、轉(zhuǎn)換和整合;

3、進(jìn)行數(shù)據(jù)任務(wù)流程調(diào)優(yōu)及準(zhǔn)確性改進(jìn),進(jìn)行數(shù)據(jù)質(zhì)量監(jiān)測、校驗和提升。

4、負(fù)責(zé)大數(shù)據(jù)平臺的開發(fā)、維護(hù)工作;

任職要求:1、2年以上數(shù)據(jù)平臺或商務(wù)智能領(lǐng)域開發(fā)工作經(jīng)驗,并實際參與過數(shù)據(jù)集成或etl開發(fā);

2、熟練掌握ssis、kettle、informatica等至少一種etl工具的使用;

3、熟悉sql server等主流數(shù)據(jù)庫(sql server、oracle、mysql等),有sql server事務(wù)復(fù)制 或oracle的goldengate經(jīng)驗者優(yōu)先;

4、能熟練進(jìn)行sql查詢優(yōu)化,熟練使用存儲過程、有海量數(shù)據(jù)處理經(jīng)驗者優(yōu)先;

5、有醫(yī)療信息系統(tǒng)(his、emr、集成平臺等)開發(fā)及實施經(jīng)驗優(yōu)先;

第5篇 dba數(shù)據(jù)庫工程師崗位職責(zé)

數(shù)據(jù)庫dba 工程師 云天勵飛 深圳云天勵飛技術(shù)有限公司,云天勵飛,深圳云天勵飛,云天勵飛 職位描述:

崗位職責(zé):

1、負(fù)責(zé)管理核心數(shù)據(jù)庫系統(tǒng);

2、數(shù)據(jù)庫維護(hù)和監(jiān)控,并進(jìn)行查詢分析和優(yōu)化;

3、配合技術(shù)部項目進(jìn)行數(shù)據(jù)庫設(shè)計,制定合適的數(shù)據(jù)庫架構(gòu)。

4、完善數(shù)據(jù)庫文檔管理,促進(jìn)知識積累和經(jīng)驗分享,及改善工作效率;

5、研究前瞻性的數(shù)據(jù)庫技術(shù),促進(jìn)數(shù)據(jù)庫應(yīng)用技術(shù)的成長進(jìn)化;

任職要求:

1、熟悉數(shù)據(jù)庫的運行機制和體系架構(gòu),熟悉mysql,oracle或者sql server中一種;

2、熟悉數(shù)據(jù)庫的管理,擴(kuò)容,備份,優(yōu)化;

3、熟悉數(shù)據(jù)庫高可用可擴(kuò)展解決方案,有數(shù)據(jù)庫故障檢測和恢復(fù)經(jīng)驗;

4、熟悉 linu_操作系統(tǒng)的管理維護(hù)與使用,及常用服務(wù)的架設(shè)與維護(hù);

5、熟悉sql優(yōu)化;

6、熟悉 linu_系統(tǒng)下shell/script編程,至少掌握一門腳本編程語言(php、perl、python、ruby);

7、有自動化運維經(jīng)驗者優(yōu)先;

8、有海量數(shù)據(jù)構(gòu)架經(jīng)驗者優(yōu)先;

有以下經(jīng)驗更優(yōu):

1、熟悉mysql的myisam,innodb,memory引擎,精通存儲過程和事務(wù);

2、linu_系統(tǒng)硬盤,內(nèi)存數(shù)據(jù)庫調(diào)優(yōu)。

第6篇 大數(shù)據(jù)基礎(chǔ)架構(gòu)工程師職位描述與崗位職責(zé)任職要求

職位描述：

職位描述:

1、負(fù)責(zé)hadoop平臺集群架構(gòu)、搭建、運維；

2、負(fù)責(zé)搭建分布式計算平臺、查詢引擎、中間件；

3、負(fù)責(zé)大數(shù)據(jù)平臺資源規(guī)劃、權(quán)限控制；

4、制定平臺運營管理規(guī)范，保障平臺可持續(xù)高效、穩(wěn)定運行。

任職要求：

1、本科或以上學(xué)歷，計算機相關(guān)專業(yè)優(yōu)先；

2、熟悉java后臺服務(wù)開發(fā)和面向?qū)ο蟪绦蛟O(shè)計；

3、熟悉hadoop生態(tài)圈及hdfs、hive、kafka、spark、flink等開源產(chǎn)品；

4、精通java有較強的編碼能力，能獨立解決技術(shù)難題。

附加要求：

1、熟悉hbase、spark、zookeeper等任一開源代碼優(yōu)先；

2、有分布式、緩存、消息隊列等研發(fā)經(jīng)驗優(yōu)先。

第7篇 數(shù)據(jù)庫開發(fā)工程師-南昌職位描述與崗位職責(zé)任職要求

職位描述：

工作概述：

從事數(shù)據(jù)庫開發(fā)維護(hù)相關(guān)工作。

職位要求：

1.熟悉oracle或db2數(shù)據(jù)庫，并從業(yè)1年以上；

2.熟練掌握sql語句，并有存儲過程開發(fā)經(jīng)驗；

3.熟悉電信業(yè)務(wù)優(yōu)先錄??；

4.做過大數(shù)據(jù)項目優(yōu)先錄取；

5.團(tuán)隊合作意識，并能適應(yīng)工作壓力和一定量加班。

第8篇 數(shù)據(jù)抓取資深工程師職位描述與崗位職責(zé)任職要求

職位描述：

工作職責(zé)：

1、負(fù)責(zé)今日頭條、西瓜視頻、topbuzz、buzzvideo等產(chǎn)品的全球內(nèi)容接入，通過算法智能解析各語種頁面結(jié)構(gòu)，自適應(yīng)提取頁面關(guān)鍵信息

2、負(fù)責(zé)全網(wǎng)圖文、長短視頻、sns內(nèi)容監(jiān)控，對海量的站內(nèi)外發(fā)文、用戶關(guān)系分析挖掘；每日處理上億條數(shù)據(jù)，提供幾十億內(nèi)容在線服務(wù)

3、負(fù)責(zé)通用垂直抓取平臺建設(shè)，服務(wù)頭條、抖音等所有業(yè)務(wù)團(tuán)隊，快速解決各種不同的抓取訴求，提供數(shù)據(jù)和平臺支持

4、負(fù)責(zé)項目整體架構(gòu)設(shè)計與優(yōu)化，主導(dǎo)代碼開發(fā)測試，并積極推動上線；負(fù)責(zé)初、中級工程師的培養(yǎng)

任職要求：

1、具備強悍的編碼能力，有扎實的數(shù)據(jù)結(jié)構(gòu)和算法功底

2、精通python、php、c++、java、golang中的至少一門語言

3、理解http、計算機網(wǎng)絡(luò)，熟悉html、dom、_path等

4、責(zé)任心強，積極主動，有良好的溝通能力和團(tuán)隊合作能力

5、工作認(rèn)真細(xì)致踏實，較強的學(xué)習(xí)能力、分析解決問題能力

6、有很好的產(chǎn)品意識，對業(yè)務(wù)流程有良好的抽象和總結(jié)能力

第9篇 地圖數(shù)據(jù)工程師崗位職責(zé)

地圖數(shù)據(jù)工程師 銀泰商業(yè)集團(tuán)有限公司 浙江銀泰百貨有限公司,銀泰商業(yè),銀泰 arcgis地圖工程師:

【崗位描述】

1、室內(nèi)地圖的采集和繪制;

2、室內(nèi)定位指紋信息的點位采集

【崗位要求】

1、地圖測繪、gis、計算機、室內(nèi)建筑設(shè)計等相關(guān)專畢業(yè),或經(jīng)過相關(guān)培訓(xùn),具有一定的外業(yè)測繪和建筑繪圖能力;

2、熟練使用autocad和arcgis等制圖軟件;

3、了解gis數(shù)據(jù)和地圖圖式規(guī)范,熟悉地圖數(shù)據(jù)的處理流程和方法;

4、有室內(nèi)地圖測量制作和數(shù)據(jù)處理工作經(jīng)驗者優(yōu)先(例如高德或百度室內(nèi)地圖);

5、腳本開發(fā)項目經(jīng)驗優(yōu)先。

第10篇 高級java開發(fā)工程師（大數(shù)據(jù)）職位描述與崗位職責(zé)任職要求

職位描述：

崗位職責(zé)：

1.負(fù)責(zé)物聯(lián)網(wǎng)、大數(shù)據(jù)平臺相關(guān)的技術(shù)研究、研發(fā)與測試等工作

2.負(fù)責(zé)基于物聯(lián)網(wǎng)、大數(shù)據(jù)平臺進(jìn)行業(yè)務(wù)開發(fā)

技能要求：

1.本科以上學(xué)歷，1年以上工作經(jīng)驗；

2.精通java后臺程序設(shè)計，java基礎(chǔ)扎實，要求掌握jvm基本原理、類加載、反射、集合、并發(fā)、io、網(wǎng)絡(luò)等內(nèi)容；

3.對數(shù)據(jù)結(jié)構(gòu)、算法有深刻理解；

4.熟悉linu_開發(fā)環(huán)境，熟悉python、shell、perl中的一種；

5.有hadoop、hbase、storm、kafka等系統(tǒng)的源代碼閱讀經(jīng)驗者優(yōu)先。

第11篇 前端開發(fā)工程師（數(shù)據(jù)可視化）職位描述與崗位職責(zé)任職要求

職位描述：

工作職責(zé)：

1、和大數(shù)據(jù)工程師共同工作，探索可視化的技術(shù)方案和產(chǎn)品應(yīng)用；

2、開發(fā)展示為主的數(shù)據(jù)大屏和業(yè)務(wù)分析為主的數(shù)據(jù)產(chǎn)品以及在移動端數(shù)據(jù)可視化項目;

3、負(fù)責(zé)數(shù)據(jù)產(chǎn)品/可視化大屏的前端架構(gòu)和應(yīng)用后臺及通用組件的開發(fā)；

任職要求：

1、本科及以上學(xué)歷，功底扎實，視野開闊，對新技術(shù)具有敏感和熱情；

2、熟悉數(shù)據(jù)可視化開源方案，有數(shù)據(jù)分析場景/數(shù)據(jù)可視化經(jīng)驗者(echarts/highcharts/d3)優(yōu)先；

3、技術(shù)跟隨前沿，熟悉servlet，html5，javascript，json，了解node/angularjs/react；

4、熟悉web后臺性能優(yōu)化和前端展示技術(shù);

5、熟悉1-2種分析型數(shù)據(jù)庫(如db/hive/neo4j)者優(yōu)先。

第12篇 bi數(shù)據(jù)倉庫工程師崗位職責(zé)

bi工程師-數(shù)據(jù)倉庫 涂鴉智能 杭州涂鴉科技有限公司,涂鴉智能,愛相機 崗位職責(zé):

1. 負(fù)責(zé)業(yè)務(wù)數(shù)據(jù)調(diào)研、需求理解,數(shù)據(jù)采集方案設(shè)計及實現(xiàn);

2. 負(fù)責(zé)建立數(shù)據(jù)模型,根據(jù)業(yè)務(wù)設(shè)計數(shù)據(jù)主題;

3. 負(fù)責(zé)數(shù)據(jù)模型的etl編寫,參與團(tuán)隊etl流程的優(yōu)化及解決etl相關(guān)技術(shù)問題;

4. 理解業(yè)務(wù)方的數(shù)據(jù)需求,提供面向業(yè)務(wù)的olap、報表、數(shù)據(jù)提取等數(shù)據(jù)服務(wù);

任職要求:

1. 本科及以上學(xué)歷,計算機相關(guān)專業(yè),2-5年企業(yè)級數(shù)據(jù)平臺相關(guān)系統(tǒng)開發(fā)經(jīng)驗;

2. sql技能嫻熟,精通hive-sql,presto-sql

3. 具有扎實的計算機操作系統(tǒng)、數(shù)據(jù)結(jié)構(gòu)等編程基礎(chǔ),熟悉java或scala語言;

4. 有過2年以上bi項目經(jīng)驗,熟悉開源的bi工具如:metabase,superset,redash.有實際操作經(jīng)驗。

7. 有良好的溝通能力,善于主動思考和行動,有極強的責(zé)任心和自驅(qū)力。

第13篇 數(shù)據(jù)爬蟲工程師職位描述與崗位職責(zé)任職要求

職位描述：

工作職責(zé)：

1.開發(fā)網(wǎng)頁自動化腳本。

2.負(fù)責(zé)商品信息結(jié)構(gòu)化，編寫自動化腳本解析網(wǎng)頁信息。

3.商品索引系統(tǒng)：億級sku的庫存價格實時跟蹤同步，并對商品進(jìn)行智能分類、本地化、圖片處理和去重。

4.設(shè)計、開發(fā)、測試、部署以及維護(hù)并改進(jìn)各子系統(tǒng)；

5.管理項目優(yōu)先級并按時交付。

職位要求：

1.全日制統(tǒng)招本科、碩士畢業(yè)，1年以上軟件開發(fā)工作經(jīng)驗；

2.熟悉至少一門通用靜態(tài)編譯編程語言，c/c++/java/c#/go；

3.熟悉web端基礎(chǔ)標(biāo)準(zhǔn)，包括html、css、javascript、json等；

4.熟悉python或其他腳本語言，有興趣和能力根據(jù)需求學(xué)習(xí)其他編程語言；

5.熟悉uni_/linu_環(huán)境，memcache/redis/mongodb等存儲系統(tǒng)，能獨立設(shè)計開發(fā)包括前后端交互的業(yè)務(wù)子系統(tǒng)；

6.熟悉常見的設(shè)計模式、單元測試、持續(xù)開發(fā)集成、code review，并能在日常工作踐行；

7.了解搜索引擎、電子商務(wù)、社交類應(yīng)用的系統(tǒng)基本架構(gòu)，能對已有的子系統(tǒng)進(jìn)行優(yōu)化調(diào)整的優(yōu)先；

8.活躍的開源項目貢獻(xiàn)者優(yōu)先。

第14篇 大數(shù)據(jù)架構(gòu)資深工程師職位描述與崗位職責(zé)任職要求

職位描述：

工作職責(zé)：

1、打造業(yè)界領(lǐng)先的存儲、計算等分布式系統(tǒng)；

2、為海量數(shù)據(jù)和大規(guī)模業(yè)務(wù)系統(tǒng)提供可靠的基礎(chǔ)設(shè)施。

任職要求：

1、掌握分布式系統(tǒng)原理，對存儲、計算、消息隊列、集群管理中的一項或多項有深入的理解和認(rèn)識；

2、樂于挑戰(zhàn)沒有明顯答案的問題，能快速理解業(yè)務(wù)場景，從具體問題中抽象出通用的解決方案；

3、存儲方向：對 hdfs， rocksdb， leveldb， memcache， redis， mysql， hbase， kafka 的一項或多項有經(jīng)驗者優(yōu)先；

4、計算方向：對 spark， mapreduce， storm， hive， presto， impala 的一項或多項有經(jīng)驗者優(yōu)先；

5、集群管理方向：對 yarn， mesos 的一項或多項有經(jīng)驗者優(yōu)先；

6、向開源社區(qū)貢獻(xiàn)過 patch 者優(yōu)先，請在簡歷上說明。

第15篇 erp數(shù)據(jù)工程師崗位職責(zé)erp數(shù)據(jù)工程師職責(zé)任職要求

erp數(shù)據(jù)工程師崗位職責(zé)

1.需要將原來各系統(tǒng)的數(shù)據(jù)進(jìn)行分析，整理并導(dǎo)入到erp。2.與業(yè)務(wù)部門溝通，收集需要導(dǎo)入的數(shù)據(jù)。3.有計算機軟件相關(guān)背景，熟悉系統(tǒng)維護(hù)，可以幫助用戶解決日常簡單問題，懂?dāng)?shù)據(jù)庫者優(yōu)先考慮4.熟練運用e_cel5.三年左右工作經(jīng)驗，英語一般。6.工作認(rèn)真負(fù)責(zé).細(xì)致，有較強的責(zé)任心。

第16篇 大數(shù)據(jù)查詢引擎高級工程師職位描述與崗位職責(zé)任職要求

職位描述：

工作職責(zé)：

1、研發(fā)業(yè)界領(lǐng)先的交互式數(shù)據(jù)分析系統(tǒng)，服務(wù)于今日頭條全公司的數(shù)十個用戶產(chǎn)品線；

2、面向超大規(guī)模數(shù)據(jù)問題，每天千億增量的用戶行為數(shù)據(jù)，秒級處理pb級別的數(shù)據(jù)計算；

3、善于理解和抽象業(yè)務(wù)問題，支撐多樣的海量數(shù)據(jù)分析場景。

任職要求：

1、理解分布式系統(tǒng)，思路清晰，具備生產(chǎn)系統(tǒng)快速 trouble-shooting 的經(jīng)驗和能力，擅長分析深層次的原因；

2、對市面上常見的 olap 系統(tǒng)設(shè)計與源碼有深入研究，給 hive/kylin/presto/spark/tez 等項目提交過 patch者優(yōu)先。