- 目錄
崗位職責(zé)是什么
大數(shù)據(jù)研發(fā)崗位是企業(yè)信息化建設(shè)中的關(guān)鍵角色,負(fù)責(zé)設(shè)計(jì)、開(kāi)發(fā)和維護(hù)大數(shù)據(jù)處理系統(tǒng),以支持企業(yè)的戰(zhàn)略決策和業(yè)務(wù)運(yùn)營(yíng)。
崗位職責(zé)要求
1. 熟練掌握hadoop、spark等大數(shù)據(jù)處理框架,具備扎實(shí)的java、python等編程能力。
2. 精通數(shù)據(jù)倉(cāng)庫(kù)建模和etl(提取、轉(zhuǎn)換、加載)流程。
3. 具備良好的數(shù)據(jù)庫(kù)管理知識(shí),包括sql優(yōu)化和nosql數(shù)據(jù)庫(kù)應(yīng)用。
4. 對(duì)大數(shù)據(jù)分析和挖掘算法有深入理解,如機(jī)器學(xué)習(xí)、深度學(xué)習(xí)等。
5. 了解云計(jì)算平臺(tái),如aws、azure或google cloud,能進(jìn)行大數(shù)據(jù)解決方案的云端部署。
6. 具備良好的問(wèn)題解決能力和團(tuán)隊(duì)協(xié)作精神,能在壓力下工作。
7. 對(duì)業(yè)務(wù)需求敏感,能將技術(shù)與業(yè)務(wù)需求有效結(jié)合。
崗位職責(zé)描述
大數(shù)據(jù)研發(fā)人員的工作涵蓋數(shù)據(jù)采集、存儲(chǔ)、處理和分析的全過(guò)程。他們構(gòu)建高效的數(shù)據(jù)管道,確保數(shù)據(jù)的準(zhǔn)確性和實(shí)時(shí)性。通過(guò)與業(yè)務(wù)團(tuán)隊(duì)緊密合作,他們理解業(yè)務(wù)需求,利用大數(shù)據(jù)技術(shù)提供洞見(jiàn),驅(qū)動(dòng)業(yè)務(wù)創(chuàng)新。此外,他們還需要持續(xù)關(guān)注技術(shù)發(fā)展,優(yōu)化現(xiàn)有系統(tǒng),以應(yīng)對(duì)不斷增長(zhǎng)的數(shù)據(jù)量和復(fù)雜性。
有哪些內(nèi)容
1. 數(shù)據(jù)架構(gòu)設(shè)計(jì):規(guī)劃和實(shí)現(xiàn)大數(shù)據(jù)存儲(chǔ)架構(gòu),確保數(shù)據(jù)的高可用性和可擴(kuò)展性。
2. 數(shù)據(jù)處理開(kāi)發(fā):編寫(xiě)和優(yōu)化數(shù)據(jù)處理代碼,實(shí)現(xiàn)數(shù)據(jù)清洗、轉(zhuǎn)換和整合。
3. 數(shù)據(jù)分析與建模:運(yùn)用統(tǒng)計(jì)學(xué)和機(jī)器學(xué)習(xí)方法,建立預(yù)測(cè)模型,為決策提供依據(jù)。
4. 平臺(tái)運(yùn)維與監(jiān)控:維護(hù)大數(shù)據(jù)平臺(tái)的穩(wěn)定運(yùn)行,定期進(jìn)行性能調(diào)優(yōu)和故障排查。
5. 項(xiàng)目協(xié)作:與產(chǎn)品經(jīng)理、業(yè)務(wù)分析師等跨部門(mén)團(tuán)隊(duì)協(xié)作,確保項(xiàng)目順利實(shí)施。
6. 技術(shù)研究與創(chuàng)新:跟蹤最新大數(shù)據(jù)技術(shù)和行業(yè)趨勢(shì),探索新技術(shù)在企業(yè)中的應(yīng)用可能性。
總結(jié),大數(shù)據(jù)研發(fā)崗位在企業(yè)中扮演著數(shù)據(jù)驅(qū)動(dòng)創(chuàng)新的關(guān)鍵角色,不僅需要深厚的技術(shù)功底,更需要對(duì)業(yè)務(wù)的深刻理解和持續(xù)的技術(shù)探索。
大數(shù)據(jù)研發(fā)崗位職責(zé)范文
第1篇 大數(shù)據(jù)研發(fā)工程師-抖音/火山職位描述與崗位職責(zé)任職要求
職位描述:
工作職責(zé):
1、負(fù)責(zé)抖音/火山等多個(gè)業(yè)務(wù)線的策略算法建設(shè)與優(yōu)化工作;
2、通過(guò)海量數(shù)據(jù),分析與挖掘各種潛在關(guān)聯(lián),不斷優(yōu)化策略效果,保障用戶體驗(yàn);
4、負(fù)責(zé)實(shí)時(shí)及離線特征抽取、融合,為數(shù)據(jù)挖掘及策略平臺(tái)提供特征服務(wù);
5、負(fù)責(zé)大數(shù)據(jù)能力在產(chǎn)品功能上的落地,推動(dòng)產(chǎn)品數(shù)據(jù)化和智能化。
任職要求:
1、計(jì)算機(jī)等相關(guān)專業(yè),碩士或以上學(xué)歷,3年以上大數(shù)據(jù)、人工智能相關(guān)經(jīng)驗(yàn);
2、熟悉hive/hadoop/spark/flink/clickhouse/druid等大數(shù)據(jù)開(kāi)發(fā)技術(shù);
3、有良好的業(yè)務(wù)和產(chǎn)品sense,執(zhí)行力、推動(dòng)力強(qiáng)優(yōu)先;
4、有豐富的行業(yè)經(jīng)驗(yàn),豐富的專業(yè)知識(shí),獨(dú)特的行業(yè)見(jiàn)解,有戰(zhàn)略視野和規(guī)劃能力優(yōu)先;
5、優(yōu)秀的理解溝通能力,崇尚數(shù)據(jù)說(shuō)話,深信數(shù)據(jù)在驅(qū)動(dòng)業(yè)務(wù)、支撐決策上的價(jià)值優(yōu)先。
第2篇 大數(shù)據(jù)研發(fā)工程師-平臺(tái)服務(wù)方向職位描述與崗位職責(zé)任職要求
職位描述:
工作職責(zé):
1、針對(duì)字節(jié)跳動(dòng)全局性數(shù)據(jù)分析要求,打造行業(yè)領(lǐng)先的數(shù)據(jù)平臺(tái),對(duì)全球用戶數(shù)據(jù),打造高效穩(wěn)定的batch和rt數(shù)據(jù)流;
2、利用大數(shù)據(jù)工具,打造計(jì)算,傳輸,分析,監(jiān)控平臺(tái);滿足字節(jié)跳動(dòng)全球用戶產(chǎn)品的指標(biāo)計(jì)算,多維分析等需求;
3、構(gòu)建高效穩(wěn)定的數(shù)據(jù)服務(wù),支撐字節(jié)跳動(dòng)全球各重要業(yè)務(wù)的用戶增長(zhǎng)。
任職要求:
1、計(jì)算機(jī)、數(shù)學(xué)相關(guān)專業(yè)本科及以上學(xué)歷,一年以上大數(shù)據(jù)開(kāi)發(fā)工作經(jīng)驗(yàn),數(shù)據(jù)挖掘和bi分析領(lǐng)域優(yōu)先;
2、熟悉多項(xiàng)大數(shù)據(jù)領(lǐng)域的開(kāi)源框架,e.g. hadoop, hive, presto, storm, spark, kafka, hbase, redis, rocksdb, elasticsearch, druid等;
3、強(qiáng)悍的編碼和學(xué)習(xí)能力;善于發(fā)現(xiàn)問(wèn)題,積極探索原因。
第3篇 大數(shù)據(jù)研發(fā)經(jīng)理崗位職責(zé)
大數(shù)據(jù)研發(fā)經(jīng)理 崗位職責(zé):
1. 負(fù)責(zé)公司大數(shù)據(jù)平臺(tái)的規(guī)劃與建設(shè)。
2.組建大數(shù)據(jù)領(lǐng)域技術(shù)團(tuán)隊(duì),以數(shù)據(jù)為依據(jù)向運(yùn)營(yíng)提供決策建議。
3.負(fù)責(zé)機(jī)器學(xué)習(xí)產(chǎn)品總體架構(gòu),攻克技術(shù)難關(guān)和主導(dǎo)關(guān)鍵技術(shù)決策。
4.負(fù)責(zé)底層系統(tǒng)的設(shè)計(jì)和搭建工作。
5.指導(dǎo)研發(fā)團(tuán)隊(duì)成員工作,提升團(tuán)隊(duì)研發(fā)能力。
任職要求:
1.數(shù)學(xué)、電子及計(jì)算機(jī)、金融類專業(yè),碩士以上學(xué)歷,博士?jī)?yōu)先;
2.較扎實(shí)的機(jī)器學(xué)習(xí)基本功,熟悉經(jīng)典的算法并有實(shí)踐經(jīng)驗(yàn),包括lr、svm、gbdt、dnn、lstm、nlp等; 對(duì)以下至少一個(gè)領(lǐng)域有深入研究或者資深的工作經(jīng)驗(yàn);
(a)深度學(xué)習(xí);
(b)自然語(yǔ)言處理;
(c)搜索/推薦算法;
(d)知識(shí)表示及推理、問(wèn)答系統(tǒng);
(e)圖像識(shí)別;
(f)統(tǒng)計(jì)機(jī)器學(xué)習(xí)。
3.熟悉tensorflow/caffe等至少一種深度學(xué)習(xí)框架,有二次開(kāi)發(fā)經(jīng)驗(yàn)者優(yōu)先;
4.熟悉python 和java 或c++。
5.學(xué)習(xí)能力強(qiáng)、善于溝通、對(duì)技術(shù)創(chuàng)新充滿激情 崗位職責(zé):
1. 負(fù)責(zé)公司大數(shù)據(jù)平臺(tái)的規(guī)劃與建設(shè)。
2.組建大數(shù)據(jù)領(lǐng)域技術(shù)團(tuán)隊(duì),以數(shù)據(jù)為依據(jù)向運(yùn)營(yíng)提供決策建議。
3.負(fù)責(zé)機(jī)器學(xué)習(xí)產(chǎn)品總體架構(gòu),攻克技術(shù)難關(guān)和主導(dǎo)關(guān)鍵技術(shù)決策。
4.負(fù)責(zé)底層系統(tǒng)的設(shè)計(jì)和搭建工作。
5.指導(dǎo)研發(fā)團(tuán)隊(duì)成員工作,提升團(tuán)隊(duì)研發(fā)能力。
任職要求:
1.數(shù)學(xué)、電子及計(jì)算機(jī)、金融類專業(yè),碩士以上學(xué)歷,博士?jī)?yōu)先;
2.較扎實(shí)的機(jī)器學(xué)習(xí)基本功,熟悉經(jīng)典的算法并有實(shí)踐經(jīng)驗(yàn),包括lr、svm、gbdt、dnn、lstm、nlp等; 對(duì)以下至少一個(gè)領(lǐng)域有深入研究或者資深的工作經(jīng)驗(yàn);
(a)深度學(xué)習(xí);
(b)自然語(yǔ)言處理;
(c)搜索/推薦算法;
(d)知識(shí)表示及推理、問(wèn)答系統(tǒng);
(e)圖像識(shí)別;
(f)統(tǒng)計(jì)機(jī)器學(xué)習(xí)。
3.熟悉tensorflow/caffe等至少一種深度學(xué)習(xí)框架,有二次開(kāi)發(fā)經(jīng)驗(yàn)者優(yōu)先;
4.熟悉python 和java 或c++。
5.學(xué)習(xí)能力強(qiáng)、善于溝通、對(duì)技術(shù)創(chuàng)新充滿激情
第4篇 品牌廣告大數(shù)據(jù)研發(fā)工程師-核心廣告系統(tǒng)職位描述與崗位職責(zé)任職要求
職位描述:
工作職責(zé):
1、負(fù)責(zé)品牌廣告業(yè)務(wù)平臺(tái)及其相關(guān)系統(tǒng)的研發(fā)
2、負(fù)責(zé)現(xiàn)有系統(tǒng)的問(wèn)題分析和改進(jìn),提高系統(tǒng)性能,保證系統(tǒng)穩(wěn)定性
3、持續(xù)改進(jìn)系統(tǒng)架構(gòu)、核心算法或者核心技術(shù)等,保證系統(tǒng)高性能、高可用性和高可擴(kuò)展性
4、新技術(shù)預(yù)研,完成項(xiàng)目的選型和設(shè)計(jì),難點(diǎn)公關(guān)
任職要求:
1、本科及以上學(xué)歷,一年以上大數(shù)據(jù)系統(tǒng)開(kāi)發(fā)經(jīng)驗(yàn)
2、熟悉python語(yǔ)言, 熟練使用linu_
3、對(duì)常用的redis、kafka等工具系統(tǒng)有一定的了解
4、有大數(shù)據(jù)集、分布式計(jì)算工具(hadoop,spark,hive,storm, es)等應(yīng)用開(kāi)發(fā)經(jīng)驗(yàn)優(yōu)先
5、有良好的團(tuán)隊(duì)合作精神,較強(qiáng)的溝通能力
6、愿意深入了解業(yè)務(wù)知識(shí),并能敏銳的發(fā)現(xiàn)業(yè)務(wù)痛點(diǎn)
7、有品牌廣告系統(tǒng)、dmp、輿情、指數(shù)平臺(tái)方向開(kāi)發(fā)經(jīng)驗(yàn)者優(yōu)先
第5篇 高級(jí)實(shí)時(shí)大數(shù)據(jù)研發(fā)工程師/數(shù)據(jù)技術(shù)專家職位描述與崗位職責(zé)任職要求
職位描述:
職責(zé)描述:
基于flink開(kāi)源大數(shù)據(jù)計(jì)算平臺(tái),在集團(tuán)整體業(yè)務(wù)場(chǎng)景下,
1. 研發(fā)實(shí)時(shí)流計(jì)算數(shù)據(jù)研發(fā)平臺(tái),支持包括核心電商、云計(jì)算、大文娛、創(chuàng)新業(yè)務(wù)在內(nèi)的等各個(gè)綜合業(yè)務(wù)板塊務(wù);
2. 研發(fā)實(shí)時(shí)olap(elasticsearch,druid)賦能業(yè)務(wù)
3. 研發(fā)實(shí)時(shí)智能化(算法加工程)賦能業(yè)務(wù)
任職要求:
1.具備扎實(shí)的計(jì)算機(jī)理論基礎(chǔ), 對(duì)數(shù)據(jù)結(jié)構(gòu)及算法有較強(qiáng)的功底
2.精通java語(yǔ)言編程,具備優(yōu)秀的系統(tǒng)debug/profiling能力和經(jīng)驗(yàn)
3. 熟悉常見(jiàn)的面向?qū)ο笤O(shè)計(jì)模式,具備優(yōu)秀的系統(tǒng)架構(gòu)設(shè)計(jì)能力
4.熟悉hadoop/hbase/flink/spark streaming等開(kāi)源大數(shù)據(jù)技術(shù),在開(kāi)源社區(qū)活躍者優(yōu)先
5.熟悉elasticsearch/druid 等olap開(kāi)源技術(shù)優(yōu)先
6.具備實(shí)際的大數(shù)據(jù)業(yè)務(wù)開(kāi)發(fā)經(jīng)驗(yàn)以及良好的項(xiàng)目溝通和協(xié)調(diào)能力
7. 具備實(shí)時(shí)流計(jì)算數(shù)據(jù)開(kāi)發(fā)經(jīng)驗(yàn)、全棧開(kāi)發(fā)經(jīng)驗(yàn)優(yōu)先
第6篇 實(shí)時(shí)大數(shù)據(jù)研發(fā)工程師/數(shù)據(jù)技術(shù)專家(p6-p8)職位描述與崗位職責(zé)任職要求
職位描述:
職責(zé)描述:
基于flink開(kāi)源大數(shù)據(jù)計(jì)算平臺(tái),在阿里集團(tuán)整體業(yè)務(wù)場(chǎng)景下,
1. 研發(fā)實(shí)時(shí)流計(jì)算數(shù)據(jù)研發(fā)平臺(tái),支持包括核心電商、云計(jì)算、大文娛、創(chuàng)新業(yè)務(wù)在內(nèi)的等各個(gè)綜合業(yè)務(wù)板塊務(wù);
2. 研發(fā)實(shí)時(shí)olap(elasticsearch,druid)賦能業(yè)務(wù)
3. 研發(fā)實(shí)時(shí)智能化(算法加工程)賦能業(yè)務(wù)
任職要求:
1.具備扎實(shí)的計(jì)算機(jī)理論基礎(chǔ), 對(duì)數(shù)據(jù)結(jié)構(gòu)及算法有較強(qiáng)的功底
2.精通java語(yǔ)言編程,具備優(yōu)秀的系統(tǒng)debug/profiling能力和經(jīng)驗(yàn)
3. 熟悉常見(jiàn)的面向?qū)ο笤O(shè)計(jì)模式,具備優(yōu)秀的系統(tǒng)架構(gòu)設(shè)計(jì)能力
4.熟悉hadoop/hbase/flink/spark streaming等開(kāi)源大數(shù)據(jù)技術(shù),在開(kāi)源社區(qū)活躍者優(yōu)先
5.熟悉elasticsearch/druid 等olap開(kāi)源技術(shù)優(yōu)先
6.具備實(shí)際的大數(shù)據(jù)業(yè)務(wù)開(kāi)發(fā)經(jīng)驗(yàn)以及良好的項(xiàng)目溝通和協(xié)調(diào)能力
7. 具備實(shí)時(shí)流計(jì)算數(shù)據(jù)開(kāi)發(fā)經(jīng)驗(yàn)、全棧開(kāi)發(fā)經(jīng)驗(yàn)優(yōu)先
第7篇 大數(shù)據(jù)研發(fā)工程師-廣告系統(tǒng)數(shù)據(jù)平臺(tái)職位描述與崗位職責(zé)任職要求
職位描述:
工作職責(zé):
1、廣告各類在線業(yè)務(wù)的離線數(shù)據(jù)加工與在線數(shù)據(jù)服務(wù)開(kāi)發(fā)與維護(hù);
2、數(shù)據(jù)服務(wù)接口及產(chǎn)品需求研發(fā)迭代,代碼review、bug修復(fù)及日常服務(wù)運(yùn)維;
3、針對(duì)海量數(shù)據(jù)處理和查詢需求,設(shè)計(jì)適應(yīng)業(yè)務(wù)變化的合理的多維數(shù)據(jù)分析系統(tǒng)架構(gòu),滿足多樣性的需求;
4、海量日志清洗加工,并抽象出可以多業(yè)務(wù)復(fù)用的數(shù)據(jù)模型。
任職要求:
1、計(jì)算機(jī)相關(guān)專業(yè)本科及以上學(xué)歷,熟悉hadoop架構(gòu)和工作原理,精通mapreduce編程;精通hive,有hql優(yōu)化經(jīng)驗(yàn);
2、熟悉java,python等多種編程技術(shù),編程能力強(qiáng),有web服務(wù)開(kāi)發(fā)經(jīng)驗(yàn),具備獨(dú)立完成模塊開(kāi)發(fā)能力;
3、理解基本的設(shè)計(jì)模式,能將業(yè)務(wù)需求快速理解成技術(shù)需求;
4、熟練使用mysql,熟練使用elasticsearch、druid者優(yōu)先;熟悉其原理者優(yōu)先;
5、善于溝通,工作積極主動(dòng),責(zé)任心強(qiáng),具備良好的團(tuán)隊(duì)協(xié)作能力;
6、具備良好的問(wèn)題分析與解決能力,有較強(qiáng)學(xué)習(xí)能力和邏輯思維能力。
額外加分項(xiàng)::
github等開(kāi)源社區(qū)貢獻(xiàn)者;
具備大規(guī)模分布式服務(wù)設(shè)計(jì)能力和經(jīng)驗(yàn)。
第8篇 大數(shù)據(jù)研發(fā)經(jīng)理職位描述與崗位職責(zé)任職要求
職位描述:
崗位職責(zé):
1、負(fù)責(zé)大數(shù)據(jù)團(tuán)隊(duì)建設(shè)和管理工作;
2、負(fù)責(zé)公司的大數(shù)據(jù)平臺(tái)的建設(shè)與開(kāi)發(fā);
3、參與大數(shù)據(jù)關(guān)鍵技術(shù)方案論證評(píng)審和技術(shù)投標(biāo)方案編寫(xiě);
4、負(fù)責(zé)產(chǎn)品/項(xiàng)目的需求調(diào)研、數(shù)據(jù)分析及數(shù)據(jù)挖掘建模等工作;
5、大數(shù)據(jù)平臺(tái)的新技術(shù)調(diào)研,指導(dǎo)和培養(yǎng)工程師。
任職要求:
1、計(jì)算機(jī)相關(guān)專業(yè),5年及以上工作經(jīng)驗(yàn),有至少2個(gè)以上的大數(shù)據(jù)項(xiàng)目研發(fā)和管理經(jīng)驗(yàn);
2、熟練使用hadoop及hadoop生態(tài)圈中的常用組件原理及應(yīng)用,對(duì)基于spark、sqoop、hbase、hive、
flume、kafka、storm、mapreduce、hdfs、yarn等組件開(kāi)發(fā)使用有深入理解;
3、熟悉linu_開(kāi)發(fā)環(huán)境及java開(kāi)發(fā),熟悉spring、springmvc、mybatis等常用java框架;
4、對(duì)數(shù)據(jù)結(jié)構(gòu)和算法設(shè)計(jì)具有深刻的理解,熟悉常用數(shù)據(jù)挖掘算法,并有一定的算法實(shí)現(xiàn)調(diào)優(yōu)經(jīng)驗(yàn);
5、具有良好的方案編寫(xiě)能力,良好溝通能力和團(tuán)隊(duì)合作精神,工作認(rèn)真細(xì)致,責(zé)任心強(qiáng)。
第9篇 廣告大數(shù)據(jù)研發(fā)工程師/專家(p6-p8)3職位描述與崗位職責(zé)任職要求
職位描述:
職責(zé)描述:
社交廣告系統(tǒng)數(shù)據(jù)工程平臺(tái)研發(fā),偏重系統(tǒng)架構(gòu)設(shè)計(jì)與實(shí)現(xiàn),參加以下一到多項(xiàng)工作:
1. 搭建數(shù)據(jù)倉(cāng)庫(kù),存儲(chǔ)并處理海量的實(shí)時(shí)、批量數(shù)據(jù),滿足廣告業(yè)務(wù)的定向、分析和模型特征等業(yè)務(wù)需要
2. 建設(shè)數(shù)據(jù)發(fā)布系統(tǒng),將數(shù)據(jù)倉(cāng)庫(kù)的數(shù)據(jù)應(yīng)用到廣告在線業(yè)務(wù)
3. 特征工程工程系統(tǒng)建設(shè),為模型方提供特征數(shù)據(jù)流和特征離線調(diào)研、評(píng)估平臺(tái),并保證模型訓(xùn)練和預(yù)測(cè)階段的特征線上與線下一致性;
4. 用戶標(biāo)識(shí)映射、畫(huà)像數(shù)據(jù)在線服務(wù)的開(kāi)發(fā)與維護(hù);
5. 廣告后臺(tái)海量日志數(shù)據(jù)和廣告主數(shù)據(jù)處理平臺(tái);
6. 報(bào)表和廣告策略的統(tǒng)計(jì)數(shù)據(jù)生成和存儲(chǔ);
7. 多維透視業(yè)務(wù)索引和存儲(chǔ);
任職要求:
重點(diǎn)大學(xué)本科以上學(xué)歷,計(jì)算機(jī)相關(guān)專業(yè);
具有扎實(shí)的數(shù)據(jù)結(jié)構(gòu)和算法功底;
熟練使用 java,scala,c/c++, python;
有海量數(shù)據(jù)處理經(jīng)驗(yàn),熟悉 hadoop,spark,hbase,beam等開(kāi)源框架 ;
有分布式系統(tǒng),tensorflow等機(jī)器學(xué)習(xí)系統(tǒng)等經(jīng)驗(yàn)優(yōu)先 ;
有較強(qiáng)學(xué)習(xí)能力和邏輯思維能力,具備良好的問(wèn)題分析與解決能力;
善于溝通,工作積極主動(dòng),責(zé)任心強(qiáng),具備良好的團(tuán)隊(duì)協(xié)作能力
第10篇 高級(jí)/資深大數(shù)據(jù)研發(fā)工程師職位描述與崗位職責(zé)任職要求
職位描述:
工作職責(zé):
1、負(fù)責(zé)字節(jié)跳動(dòng)用戶行為的理解和建模,幫助公司各項(xiàng)業(yè)務(wù)滿足用戶需求,提升用戶覆蓋;
2、負(fù)責(zé)在數(shù)據(jù)建設(shè)層面,對(duì)用戶隱私進(jìn)行脫敏處理,保證后續(xù)數(shù)據(jù)研發(fā)過(guò)程中保護(hù)用戶隱私;
3、探索、挖掘公司各項(xiàng)指標(biāo)、用戶滿意度、用戶增長(zhǎng)上的各項(xiàng)規(guī)律,并利用這些規(guī)律幫助產(chǎn)品提升和擴(kuò)展,增加用戶滿意度,擴(kuò)展用戶群體。
任職要求:
1、本科及以上學(xué)歷,計(jì)算機(jī)、統(tǒng)計(jì)學(xué)、數(shù)學(xué)等相關(guān)專業(yè);
2、強(qiáng)的編程和數(shù)據(jù)工具運(yùn)用能力,有hadoop,hive,spark,kafka,elasticsearch或者其他的大數(shù)據(jù)工具的使用經(jīng)驗(yàn);
3、對(duì)數(shù)據(jù)倉(cāng)庫(kù)、數(shù)據(jù)建模有一定認(rèn)知;有過(guò)數(shù)據(jù)使用相關(guān)經(jīng)驗(yàn)。
第11篇 高級(jí)大數(shù)據(jù)研發(fā)工程師(數(shù)據(jù)可視化)職位描述與崗位職責(zé)任職要求
職位描述:
崗位職責(zé):
1.負(fù)責(zé)全公司的數(shù)據(jù)平臺(tái)數(shù)據(jù)可視化研發(fā)工作
2.獨(dú)立完成數(shù)據(jù)可視化研發(fā)工作
任職要求:
1.計(jì)算機(jī)、電子通信、數(shù)學(xué)、統(tǒng)計(jì)或者相關(guān)專業(yè)本科及以上學(xué)歷
2.熟練掌握java/python中的一種語(yǔ)言
3.熟悉數(shù)據(jù)可視化開(kāi)發(fā),熟悉echarts應(yīng)用開(kāi)發(fā)的優(yōu)先
4.熟悉web開(kāi)發(fā),熟悉html,js,css
5.熟悉quick bi的優(yōu)先
6.具備良好的團(tuán)隊(duì)合作精神,工作有激情
7.對(duì)數(shù)據(jù)敏感,有產(chǎn)品思維的優(yōu)先
第12篇 大數(shù)據(jù)研發(fā)負(fù)責(zé)人職位描述與崗位職責(zé)任職要求
職位描述:
工作職責(zé):
1、負(fù)責(zé)字節(jié)跳動(dòng)旗下在上海多條產(chǎn)品線的數(shù)據(jù)倉(cāng)庫(kù)建設(shè),包括但不限于抖音(海外版),泡芙社區(qū),半次元等;
2、與業(yè)務(wù)團(tuán)隊(duì)緊密合作,深入理解并抽象業(yè)務(wù)需求,產(chǎn)出數(shù)據(jù)工具/應(yīng)用,發(fā)揮數(shù)據(jù)價(jià)值。
任職要求:
1、精通數(shù)據(jù)倉(cāng)庫(kù)實(shí)施方法論、深入了解數(shù)據(jù)倉(cāng)庫(kù)體系,并支撐過(guò)實(shí)際的互聯(lián)網(wǎng)業(yè)務(wù)場(chǎng)景;
2、具備較強(qiáng)的編碼能力,對(duì)hadoop生態(tài)的大數(shù)據(jù)基礎(chǔ)設(shè)施有較強(qiáng)理解,包括但不限于hive/spark/flink/kafka等,有數(shù)據(jù)工具的研發(fā)經(jīng)驗(yàn)者優(yōu)先;
3、善于溝通,具備優(yōu)秀的技術(shù)與業(yè)務(wù)結(jié)合能力;
4、有pb級(jí)以上海量數(shù)據(jù)處理經(jīng)驗(yàn)者優(yōu)先;
5、有團(tuán)隊(duì)管理經(jīng)驗(yàn)者優(yōu)先。
第13篇 大數(shù)據(jù)研發(fā)總監(jiān)職位描述與崗位職責(zé)任職要求
職位描述:
崗位職責(zé):
1. 負(fù)責(zé)整個(gè)公司數(shù)據(jù)系統(tǒng)的整體架構(gòu)設(shè)計(jì)
2. 負(fù)責(zé)數(shù)據(jù)倉(cāng)庫(kù)、大數(shù)據(jù)平臺(tái)、報(bào)表可視化的搭建及研發(fā);
3. 按時(shí)完成各個(gè)業(yè)務(wù)和產(chǎn)品部門(mén)的數(shù)據(jù)服務(wù)需求,不斷優(yōu)化現(xiàn)有的平臺(tái)架構(gòu);
4. 負(fù)責(zé)數(shù)據(jù)團(tuán)隊(duì)的職位描述與崗位職責(zé)任職要求、組織架構(gòu)設(shè)計(jì)、梯隊(duì)培養(yǎng)和日常管理;
5. 帶領(lǐng)團(tuán)隊(duì)設(shè)計(jì)、開(kāi)發(fā)具有創(chuàng)新價(jià)值的大數(shù)據(jù)分析平臺(tái);
任職要求:
1. 統(tǒng)招本科以上學(xué)歷,計(jì)算機(jī)、通信、數(shù)學(xué)相關(guān)專業(yè),具有8年以上研發(fā)工作經(jīng)驗(yàn);
2. 有5年以上bi、大數(shù)據(jù)研發(fā)經(jīng)驗(yàn),4年以上團(tuán)隊(duì)管理經(jīng)驗(yàn),有良好的團(tuán)隊(duì)管理能力;
3. 有較強(qiáng)的溝通和表達(dá)的能力,有較強(qiáng)的同理心,能夠合理調(diào)度資源及時(shí)滿足和匹配業(yè)務(wù)需求;
4. 精通hadoop、spark、hive、hbase等主流的大數(shù)據(jù)技術(shù);
5. 具有高度責(zé)任心,較強(qiáng)的抗壓能力,意愿強(qiáng)烈;
6. 有較強(qiáng)的數(shù)據(jù)挖掘、機(jī)器學(xué)習(xí)經(jīng)驗(yàn)者優(yōu)先;
7. 有一線互聯(lián)網(wǎng)公司或醫(yī)療行業(yè)經(jīng)驗(yàn)者優(yōu)先。
第14篇 大數(shù)據(jù)研發(fā)工程師-產(chǎn)品運(yùn)營(yíng)方向職位描述與崗位職責(zé)任職要求
職位描述:
工作職責(zé):
1、負(fù)責(zé)企業(yè)級(jí)大數(shù)據(jù)平臺(tái)的研發(fā),服務(wù)于今日頭條公司內(nèi)外的幾十條產(chǎn)品線;
2、不局限于按部就班的研發(fā)工作,有強(qiáng)烈的產(chǎn)品sense,對(duì)用戶體驗(yàn)敏感,能夠綜合運(yùn)用技術(shù)/產(chǎn)品/運(yùn)營(yíng)方案,提升終端用戶體驗(yàn);
3、平臺(tái)產(chǎn)品包括但不限于:用戶行為分析,查詢中心,bi報(bào)表,元數(shù)據(jù)管理,abtest系統(tǒng),數(shù)據(jù)開(kāi)發(fā)套件等;
任職要求:
1、計(jì)算機(jī)等相關(guān)專業(yè)優(yōu)先,本科及以上學(xué)歷;
2、復(fù)合型人才,有研發(fā)能力的pm,或有產(chǎn)品運(yùn)營(yíng)能力的研發(fā)等均可投遞;
3、做事積極主動(dòng),優(yōu)秀的組織協(xié)調(diào),推進(jìn)執(zhí)行能力,思路手段靈活,對(duì)用戶體驗(yàn)負(fù)責(zé);有數(shù)據(jù)分析,大數(shù)據(jù)研發(fā),數(shù)據(jù)產(chǎn)品設(shè)計(jì),售前售后等經(jīng)驗(yàn)之一者,優(yōu)先考慮;
第15篇 大數(shù)據(jù)研發(fā)經(jīng)理崗位職責(zé)任職要求
大數(shù)據(jù)研發(fā)經(jīng)理崗位職責(zé)
大數(shù)據(jù)平臺(tái)研發(fā)經(jīng)理 北京構(gòu)力科技有限公司 北京構(gòu)力科技有限公司,構(gòu)力 1. 負(fù)責(zé)大數(shù)據(jù)平臺(tái)核心模塊的概要設(shè)計(jì)、代碼編寫(xiě)、調(diào)試驗(yàn)證
2. 負(fù)責(zé)大數(shù)據(jù)平臺(tái)的重構(gòu)優(yōu)化,不斷提升產(chǎn)品的穩(wěn)定性和性能
3. 負(fù)責(zé)大數(shù)據(jù)平臺(tái)的關(guān)鍵技術(shù)的預(yù)研、培訓(xùn)工作
大數(shù)據(jù)研發(fā)經(jīng)理崗位
第16篇 大數(shù)據(jù)研發(fā)工程師職位描述與崗位職責(zé)任職要求
職位描述:
工作職責(zé):
1、打造業(yè)界領(lǐng)先的通用數(shù)據(jù)平臺(tái),包括實(shí)時(shí)數(shù)據(jù)流、數(shù)據(jù)倉(cāng)庫(kù)、調(diào)度系統(tǒng)、查詢引擎,用戶行為分析,abtest 實(shí)驗(yàn)系統(tǒng)等,降低數(shù)據(jù)的使用門(mén)檻,實(shí)現(xiàn)數(shù)據(jù)的最大價(jià)值
2、打造業(yè)界領(lǐng)先的存儲(chǔ)、計(jì)算等分布式系統(tǒng),為海量數(shù)據(jù)和大規(guī)模業(yè)務(wù)系統(tǒng)提供可靠的基礎(chǔ)設(shè)施
任職要求:
1、熟悉多項(xiàng)大數(shù)據(jù)領(lǐng)域的開(kāi)源框架,e.g. hadoop, hive, presto, storm, spark, kafka, hbase, redis, rocksdb, elasticsearch, druid, etc.
2、強(qiáng)悍的編碼和 troubleshooting 能力
3、樂(lè)于挑戰(zhàn)沒(méi)有明顯答案的問(wèn)題,對(duì)新技術(shù)有強(qiáng)烈的學(xué)習(xí)熱情
第17篇 空間大數(shù)據(jù)研發(fā)工程師職位描述與崗位職責(zé)任職要求
職位描述:
崗位職責(zé):
1、研究空間大數(shù)據(jù)前沿技術(shù),參與空間大數(shù)據(jù)分析平臺(tái)的設(shè)計(jì)和開(kāi)發(fā);
2、與算法工程師對(duì)接,參與空間大數(shù)據(jù)分析算法的代碼實(shí)現(xiàn);
3、其它相關(guān)的gis開(kāi)發(fā)工作;
任職資格:
1、計(jì)算機(jī)、地理信息等相關(guān)專業(yè)背景,本科及以上學(xué)歷;
2、對(duì)空間數(shù)據(jù)結(jié)構(gòu)有深刻理解,熟悉空間數(shù)據(jù)庫(kù)引擎;
3、扎實(shí)的編程基礎(chǔ),能夠熟練運(yùn)用java/scala語(yǔ)言;
4、熟悉大數(shù)據(jù)管理系統(tǒng)和分布式計(jì)算框架,如:hbase、cassandra、mongodb、spark/flink等;
5、熟悉gis領(lǐng)域主流的分布式數(shù)據(jù)存儲(chǔ)方案,有g(shù)eomesa、geowave、geotrellis、geoserver、geotools、arcgis soe使用經(jīng)驗(yàn)者優(yōu)先;
6、具備較強(qiáng)的學(xué)習(xí)創(chuàng)新能力,能夠通過(guò)快速學(xué)習(xí)解決實(shí)際問(wèn)題;
第18篇 大數(shù)據(jù)研發(fā)專家職位描述與崗位職責(zé)任職要求
職位描述:
職責(zé)描述:
1、負(fù)責(zé)全域數(shù)據(jù)和應(yīng)用產(chǎn)品的數(shù)據(jù)體系的建設(shè),通過(guò)數(shù)據(jù)+算法+工程化能力,處理和萃取數(shù)據(jù),讓其成為應(yīng)用和產(chǎn)品的能源;
2、參與大數(shù)據(jù)基礎(chǔ)架構(gòu)和技術(shù)體系的規(guī)劃建設(shè),包括數(shù)據(jù)采集平臺(tái)、數(shù)據(jù)資產(chǎn)管理與治理平臺(tái)、數(shù)據(jù)質(zhì)量及穩(wěn)定性保障體系、數(shù)據(jù)處理智能化和自動(dòng)化體系的建設(shè)。
3、 以上工作職責(zé)有具體的細(xì)分,你可以基于你的興趣和愛(ài)好選擇不同的方向發(fā)展;
任職要求:
以下能力項(xiàng)不是全部要求,我們有多個(gè)細(xì)分崗位供您選擇
1、有從事分布式數(shù)據(jù)存儲(chǔ)與計(jì)算平臺(tái)應(yīng)用開(kāi)發(fā)經(jīng)驗(yàn),熟悉hadoop生態(tài)相關(guān)技術(shù)并有相關(guān)開(kāi)發(fā)經(jīng)驗(yàn),有spark/flink的開(kāi)發(fā)經(jīng)驗(yàn)尤佳;
2、較為豐富的數(shù)據(jù)倉(cāng)庫(kù)及數(shù)據(jù)平臺(tái)的架構(gòu)經(jīng)驗(yàn),精通數(shù)據(jù)倉(cāng)庫(kù)建模及etl設(shè)計(jì)開(kāi)發(fā);有較為系統(tǒng)的海量數(shù)據(jù)性能處理經(jīng)驗(yàn);在大數(shù)據(jù)資產(chǎn)管理與治理有一定成功產(chǎn)品化經(jīng)驗(yàn);
3、具備豐富的大型互聯(lián)網(wǎng)日志采集系統(tǒng)設(shè)計(jì)或架構(gòu)經(jīng)驗(yàn),具備較扎實(shí)的理論基礎(chǔ)和工程能力,熟悉http、http等協(xié)議,有ngin_、apache等web服務(wù)器上的模塊開(kāi)發(fā)或子系統(tǒng)的架構(gòu)設(shè)計(jì)能力,有ios或android客戶端sdk及服務(wù)端架構(gòu)設(shè)計(jì)經(jīng)驗(yàn);
4、具備一定的java、python語(yǔ)言的開(kāi)發(fā)能力,具備機(jī)器學(xué)習(xí)算法能力尤佳;
5、 良好的思維邏輯性、語(yǔ)言表達(dá)能力;有較好英語(yǔ)口語(yǔ)能力,將安排海外崗位;
第19篇 大數(shù)據(jù)研發(fā)崗位職責(zé)
大數(shù)據(jù)研發(fā) 職位描述:
1、理解數(shù)據(jù)的產(chǎn)品應(yīng)用場(chǎng)景邏輯,通過(guò)統(tǒng)計(jì)方法和通用分布式框架工具語(yǔ)言如hadoop,不斷加強(qiáng)數(shù)據(jù)服務(wù)質(zhì)量;
2、負(fù)責(zé)數(shù)據(jù)清洗、轉(zhuǎn)換、建模等工作,對(duì)海量用戶行為數(shù)據(jù)通過(guò)hadoop/spark等進(jìn)行離線和實(shí)時(shí)處理;
3、參與用戶畫(huà)像、個(gè)性化推薦系統(tǒng)等數(shù)據(jù)產(chǎn)品的開(kāi)發(fā)工作
4、參與數(shù)據(jù)、工具平臺(tái)相關(guān)的功能接口、數(shù)據(jù)接口開(kāi)發(fā),完成業(yè)務(wù)功能;
崗位要求:
1、精通java或scala語(yǔ)言,具有面向?qū)ο缶幊趟枷?對(duì)底層實(shí)現(xiàn)有一定研究;
2、精通spark sql、spark streaming等編程,具有實(shí)際大型分布式集群項(xiàng)目開(kāi)發(fā)經(jīng)驗(yàn);
3、熟悉linu_操作系統(tǒng),熟悉linu_ shell編程;
4、熟悉mysql,redis等常用數(shù)據(jù)庫(kù),jetty等中間件;
5、熟悉分布式存儲(chǔ)或nosql數(shù)據(jù)庫(kù)技術(shù),如hbase等;
6、熟悉hadoop生態(tài)環(huán)境,精通以下一種或多種大數(shù)據(jù)技術(shù),如flume、kafka、hdfs、mr、elastic search;
7、熟悉常用的數(shù)據(jù)挖掘算法優(yōu)先。 職位描述:
1、理解數(shù)據(jù)的產(chǎn)品應(yīng)用場(chǎng)景邏輯,通過(guò)統(tǒng)計(jì)方法和通用分布式框架工具語(yǔ)言如hadoop,不斷加強(qiáng)數(shù)據(jù)服務(wù)質(zhì)量;
2、負(fù)責(zé)數(shù)據(jù)清洗、轉(zhuǎn)換、建模等工作,對(duì)海量用戶行為數(shù)據(jù)通過(guò)hadoop/spark等進(jìn)行離線和實(shí)時(shí)處理;
3、參與用戶畫(huà)像、個(gè)性化推薦系統(tǒng)等數(shù)據(jù)產(chǎn)品的開(kāi)發(fā)工作
4、參與數(shù)據(jù)、工具平臺(tái)相關(guān)的功能接口、數(shù)據(jù)接口開(kāi)發(fā),完成業(yè)務(wù)功能;
崗位要求:
1、精通java或scala語(yǔ)言,具有面向?qū)ο缶幊趟枷?對(duì)底層實(shí)現(xiàn)有一定研究;
2、精通spark sql、spark streaming等編程,具有實(shí)際大型分布式集群項(xiàng)目開(kāi)發(fā)經(jīng)驗(yàn);
3、熟悉linu_操作系統(tǒng),熟悉linu_ shell編程;
4、熟悉mysql,redis等常用數(shù)據(jù)庫(kù),jetty等中間件;
5、熟悉分布式存儲(chǔ)或nosql數(shù)據(jù)庫(kù)技術(shù),如hbase等;
6、熟悉hadoop生態(tài)環(huán)境,精通以下一種或多種大數(shù)據(jù)技術(shù),如flume、kafka、hdfs、mr、elastic search;
7、熟悉常用的數(shù)據(jù)挖掘算法優(yōu)先。