- 目錄
-
第1篇 大數據行業(yè)專家職位描述與崗位職責任職要求
職位描述：
職責描述：
負責部門團隊人員規(guī)劃、能力建設、業(yè)務發(fā)展方向引導
任職要求：
1、熟悉大數據發(fā)展方向、主流技術及市場現狀，深入理解行業(yè)客戶訴求
2、5年以上相關工作經驗，具備行業(yè)屬性，在金融、公共安全、醫(yī)療等領域有一定探索
3、有團隊管理經驗，能保障團隊整體能力提升
4、符合公司價值觀，品德端正，積極進取，勇于擔當，善于學習，追求卓越，心理韌性強
5、具備較強的創(chuàng)新、溝通影響能力、組織協調能力，同時有良好的評估探究問題、人際關系構建能力
第2篇 大數據計算引擎高級工程師職位描述與崗位職責任職要求
職位描述：
工作職責：
1、研發(fā)業(yè)界領先的大數據計算引擎，服務于今日頭條全公司的數十個用戶產品線；
2、面向超大規(guī)模數據問題，每天千億增量的用戶行為數據，秒級處理pb級別的數據計算；
3、善于理解和抽象業(yè)務問題，支撐多樣的海量數據分析場景。
任職要求：
1、強悍的系統(tǒng)設計&編碼能力，追求優(yōu)雅的設計和優(yōu)秀的代碼質量，高標準，快速行動；
2、對hive/kylin/presto/spark/tez/impala 的一項或多項有深入研究者優(yōu)先；
3、有pb規(guī)模的數據處理經驗者優(yōu)先/4、開源項目commiter或貢獻過patch 者優(yōu)先，請在簡歷上說明。
第3篇 高級大數據產品研發(fā)工程師職位描述與崗位職責任職要求
職位描述：
崗位職責:
1. 參與公司數據開發(fā)平臺、bi產品等大數據產品的設計和開發(fā);
2. 負責數據開發(fā)平臺、bi產品等大數據產品的部署和維護，保證其穩(wěn)定和可靠;
3. 關注和參與大數據方向開源產品的技術動態(tài)與演進，推動產品與技術架構持續(xù)更新;
任職要求:
1. 計算機相關專業(yè)，本科及以上學歷，5年以上軟件開發(fā)經驗，3年以上互聯網產品或分布式系統(tǒng)開發(fā)設計經驗;
2. 精通java， python， scala等一種或幾種編程語言， 并熟悉linu_操作系統(tǒng)及bash shell編程;
3. 有hadoop/spark/hive/presto/hbase/elasticsearch/kafka等使用經驗， 并熟悉上述常用的分布式系統(tǒng)架構設計和原理;
4. 熟悉微服務框架及相關技術， 如dubbo， springcloud等;
5. 熟悉mysql、redis， 并了解或接觸過其他數據庫如 oracle， sqlserver， postgresql， mongodb等;
6. 了解容器技術， 如docker， kubernetes;
7. 具有一定的軟件設計能力， 熱愛大數據和技術，相信技術改變世界，學習能力強，認同數據價值，有面向業(yè)務的思維， 較強的自主學習能力和英文技術文檔閱讀能力;
8. 良好的溝通能力、團隊精神及服務意識，勇于接受挑戰(zhàn)，能承受較大的工作壓力;
9. 有生產環(huán)境快速trouble-shooting的經驗和能力者優(yōu)先;
10. 有olap，多維度數據分析經驗優(yōu)先，有對數據倉庫有較強的理論基礎和理解者優(yōu)先;
第4篇 大數據安全專家職位描述與崗位職責任職要求
職位描述：
職責描述：
1、負責大數據安全整體技術解決方案的牽頭設計、編寫，以及部分落地產品的設計；
2、負責公司數據安全戰(zhàn)略級項目的售前咨詢，推進公司整體數據安全解決方案體系建設和完善。
任職要求：
1、碩士以上學歷，3年以上數據安全、網絡安全或者大數據領域工作經驗；
2、具有智慧城市、智慧公安、大型企業(yè)網絡安全、數據安全或者大數據解決方案工作經驗者優(yōu)先；
3、熟悉并研究過數據安全生命周期、數據治理、個人隱私保護、gdpr、大數據安全、dsmm者優(yōu)先；
4、熟悉并研究過前沿數據安全技術，如：大數據安全、同態(tài)加密、數據脫敏、數據鑒權；
5、熟悉國內外大數據安全、網絡安全行業(yè)發(fā)展，熟悉hadoop/hive安全設計；
6、具有良好的溝通、演講和編寫解決方案的能力。
第5篇 大數據研發(fā)工程師-產品運營方向職位描述與崗位職責任職要求
職位描述：
工作職責：
1、負責企業(yè)級大數據平臺的研發(fā)，服務于今日頭條公司內外的幾十條產品線；
2、不局限于按部就班的研發(fā)工作，有強烈的產品sense，對用戶體驗敏感，能夠綜合運用技術/產品/運營方案，提升終端用戶體驗；
3、平臺產品包括但不限于：用戶行為分析，查詢中心，bi報表，元數據管理，abtest系統(tǒng)，數據開發(fā)套件等；
任職要求：
1、計算機等相關專業(yè)優(yōu)先，本科及以上學歷；
2、復合型人才，有研發(fā)能力的pm，或有產品運營能力的研發(fā)等均可投遞；
3、做事積極主動，優(yōu)秀的組織協調，推進執(zhí)行能力，思路手段靈活，對用戶體驗負責；有數據分析，大數據研發(fā)，數據產品設計，售前售后等經驗之一者，優(yōu)先考慮；
第6篇 大數據平臺高級工程師職位描述與崗位職責任職要求
職位描述：
工作職責：
1、負責公司級的通用數據平臺和分析型產品，服務于今日頭條全公司的數十個用戶產品線；
2、面向pb級超大規(guī)模數據問題，每天處理千億增量的用戶行為數據；
3、為大數據的全生命周期提供服務，覆蓋數據產生，傳輸，建模，統(tǒng)計分析，實驗評估，可視化的全流程；
4、構建設計良好的數據流、數據倉庫、調度系統(tǒng)、查詢引擎，數據服務、分析系統(tǒng)、流程規(guī)范，數據工具/產品，降低數據的使用門檻，保證系統(tǒng)穩(wěn)定高效運行，以實現數據的最大價值。
任職要求：
1、熟悉多項大數據處理/分析相關的工具/框架，e.g.hadoop， mapreduce， hive， storm， spark， kylin，scribe， kafka， hbase， canal，sqoop etc；
2、強悍的編碼能力，生產環(huán)境快速 trouble-shooting能力，對新技術有強烈的學習熱情；
3、優(yōu)秀的理解溝通能力，能快速理解業(yè)務背景，對數據敏感，崇尚數據說話，深信數據在驅動業(yè)務、支撐決策上的價值，有web應用開發(fā)能力者優(yōu)先。
第7篇 大數據開發(fā)高級工程師-etl方向職位描述與崗位職責任職要求
職位描述：
工作職責:
1、 根據公司數據分析需求進行基于hadoop 平臺的項目開發(fā)；
2、 根據需求進行數據倉庫模型設計，熟練使用kettle工具進行etl程序的開發(fā)；包括實時數據加工，計算，etl，管理， 監(jiān)控等；
3、 負責針對源系統(tǒng)進行數據抽取、處理、分析等相關工作，及項目中涉及到的數據庫創(chuàng)建、維護及提供數據接口工作；
4、 負責設計并優(yōu)化基于hive 的數據倉庫的建設；
5、 制定數據庫備份和恢復策略及工作流程與規(guī)范。
6、能出具消費品品牌制造行業(yè)應用的數據分析技術解決方案，并落地。
任職資格:
1．從事數據倉庫領域至少2年以上，熟悉數據倉庫模型設計與etl開發(fā)經驗 ，具備海量數據加工處理相關經驗；
2. 熟悉數據倉庫領域知識和技能者優(yōu)先，包括但不局限于：元數據管理、數據開發(fā)測試工具與方法、數據質量、主數據管理；
3．有從事分布式數據存儲與計算平臺應用開發(fā)經驗，熟悉hadoop生態(tài)相關技術并有相關實踐經驗著優(yōu)先，重點考察hive、hdfs、hbase;
4. 熟練掌握kettlesqoop、data_、airflow等;
5. 有消費品品牌制造、零售行業(yè)經驗，尤其快消品行業(yè)和財務領域數據項目經驗者優(yōu)先;
6. 熟悉分布式計算presto/imapa優(yōu)先;
7．有實時計算方面的經驗的優(yōu)先。
第8篇 大數據應用分析崗位職責大數據應用分析職責任職要求
大數據應用分析崗位職責
職責描述:
1、基于行業(yè)電商大數據，撰寫專業(yè)分析報告，對行業(yè)市場產品和用戶評論進行深度分析和探索，為行業(yè)研判、品類拓展等提供策略支持。
2、研究企業(yè)在互聯網上的售銷、用戶評論、輿情、行業(yè)咨詢等等互聯網大數據，在產品企劃、研發(fā)、品質、營銷、售后、市場研究等領域提供數據驅動業(yè)務運營能力。
3、推動公司大數據產品的持續(xù)運營，包括但不限于:數據稽核、功能拓展、數據小品、業(yè)務培訓等工作。
4、梳理數據分析方法與流程，沉淀知識積累。
任職要求:
1、全日制本科或以上學歷，數學、統(tǒng)計、市場營銷等相關專業(yè)優(yōu)先考慮。3年以上數據統(tǒng)計、分析和挖掘相關工作經驗，有電商分析經驗優(yōu)先考慮。
2、熟練使用python，sql，e_cel者優(yōu)先。
3、對數據敏感，有業(yè)務意識，具備良好的邏輯分析能力和系統(tǒng)性思維能力。
4、思維敏捷，有耐心、有責任感，工作積極主動，具備學習與創(chuàng)新意識，良好的溝通能力及團隊協作意識。有洞察力和創(chuàng)新意識，快速學習能力強，適應高強度挑戰(zhàn);
5、理解互聯網數據產品的商業(yè)模式和產業(yè)生態(tài)，全面考慮產品形態(tài)和推進方式;
第9篇 大數據工程師職位描述與崗位職責任職要求
職位描述：
這是一個為商業(yè)人工智能領域構建實時大數據分析平臺的工作機會。我們希望您具備計算機科學或者相關專業(yè)領域的專業(yè)背景，并擁有構建分布式可擴展數據處理及大數據存儲方面的豐富經驗。您將擔任跨職能的團隊中的重要角色。我們希望您斗志昂揚，注重結果，積極主動，具備推動產品的增長和成功的成功經驗。
工作職責
?在云端或者本地集群上構建可擴展的實時數據處理流水線，收集、轉換、加載并管理各類數據源
?構建可擴展的分布式數據存儲
?確保所構建的數據處理管道具有高質量并可審計
?開發(fā)相關工具以優(yōu)化數據的提取、分析及可視化效率
?評估數據工程領域的新技術，并開發(fā)原型，以持續(xù)改善工作
?與框架和其他團隊合作，確保系統(tǒng)運行符合設計預期
工作要求
?全日制碩士以上學歷，計算機相關專業(yè)，cet6
?具備大數據相關技術例如spark， kafka， hadoop， hbase， hive等的豐富經驗
?具備五年以上java、scala、python相關工作經驗，mysql， redshift等sql相關經驗
?具備三年以上可擴展實時etl開發(fā)經驗
?熟悉azure/aws/gcp相關工具與知識
?良好的書面/口頭溝通技巧
?具備機器學習算法方面工作經驗者優(yōu)先
第10篇 大數據挖掘崗位職責任職要求
大數據挖掘崗位職責
大數據挖掘應用設計崗位要求:
1.大數據專業(yè)，具有豐富的數據倉庫開發(fā)經驗，有2年及以上基于hadoop/storm/hive/hbase等應用開發(fā)經驗，對分布式計算理論有深刻理解;
2. 熟練掌握大數據/機器學習方法及相關算法，對數據結構、算法有深刻理解;
3.精通java、熟練掌握mapreduce原理及數據分析相關的二次開發(fā);
4.熟悉 linu_/uni_ shell 、熟悉(perl/python/shell)任意一種腳本語言;
5.熟悉高并發(fā)分布式計算系統(tǒng)的設計，精通map reduce編程框架，熟悉常用的nosql和內存數據庫技術，如hadoop，hdfs，hbase，mongodb等分布式數據體系，熟悉storm / spark stream等相關的流式計算系統(tǒng);
6.良好的系統(tǒng)分析、架構設計能力。
崗位職責:
1. 參與設計客戶要求的數據挖掘應用，參與撰寫相關文檔;
2. 相關系統(tǒng)的編程、部署、實施工作;
3. 根據業(yè)務需要，跟蹤大數據技術領域趨勢并能結合實際業(yè)務應用。崗位要求:
1.大數據專業(yè)，具有豐富的數據倉庫開發(fā)經驗，有2年及以上基于hadoop/storm/hive/hbase等應用開發(fā)經驗，對分布式計算理論有深刻理解;
2. 熟練掌握大數據/機器學習方法及相關算法，對數據結構、算法有深刻理解;
3.精通java、熟練掌握mapreduce原理及數據分析相關的二次開發(fā);
4.熟悉 linu_/uni_ shell 、熟悉(perl/python/shell)任意一種腳本語言;
5.熟悉高并發(fā)分布式計算系統(tǒng)的設計，精通map reduce編程框架，熟悉常用的nosql和內存數據庫技術，如hadoop，hdfs，hbase，mongodb等分布式數據體系，熟悉storm / spark stream等相關的流式計算系統(tǒng);
6.良好的系統(tǒng)分析、架構設計能力。
崗位職責:
1. 參與設計客戶要求的數據挖掘應用，參與撰寫相關文檔;
2. 相關系統(tǒng)的編程、部署、實施工作;
3. 根據業(yè)務需要，跟蹤大數據技術領域趨勢并能結合實際業(yè)務應用。
大數據挖掘崗位
第11篇 大數據平臺架構師崗位職責大數據平臺架構師職責任職要求
大數據平臺架構師崗位職責
工作職責:
負責大數據開發(fā)、數據挖掘、算法平臺的技術架構及建設;
負責大數據實時檢索分析平臺的架構和建設;
負責pcg業(yè)務算法推薦，實時流計算框架的研發(fā)優(yōu)化;
跟蹤移動互聯網開源大數據框架、新算法框架的技術選型及平臺化預研及架構;
負責業(yè)務挖掘、算法應用的平臺支持;
負責>;5人的技術或ft團隊管理。
任職要求:
5年以上系統(tǒng)建設，設計，架構經驗;4年以上大數據系統(tǒng)開發(fā)，設計，架構經驗;3年以上軟件工程管理經驗;
熟悉商業(yè)智能系統(tǒng)，熟悉數據倉庫，熟悉數據集市;
熟悉大數據相關技術:hadoop， hive， hbase， zookeeper， spark， cassandra， mapreduce;并閱讀過相關源碼;
管理過數據量上t級別，節(jié)點數300以上的大數據集群，開發(fā)，優(yōu)化并管理過上t級別的大數據作業(yè);
熟悉常用機器學習算法，了解深度學習，強化學習，遷移學習算法，了解相關原理(ff， bf， sgd等);
熟悉各種抽樣方法(分層，過抽樣等)，特征處理方法(缺失值處理，離散化等);
熟悉機器學習框架或工具(spark mllib，tensorflow， caffe等)，了解源碼并能應用項目;
具備大數據云平臺、計算存儲平臺、可視化開發(fā)平臺經驗，具備中大型成功項目經驗優(yōu)先;具備大規(guī)模分布式計算平臺的使用和并行算法的開發(fā)經驗，對大數據處理及應用有濃厚興趣;
具備較強的團隊管理能力和溝通能力，思維活躍，前瞻學習能力強;
了解軟件項目管理、敏捷管理方法論，在中大型項目中有所實踐。
第12篇 流媒體大數據工程師職位描述與崗位職責任職要求
職位描述：
工作職責：
1、負責直播端及服務端海量用戶行為數據的加工處理，數據洞察驅動業(yè)務優(yōu)化；
2、打造業(yè)界領先的大數據平臺，支撐數據采集，加工，建模，分析，實驗，可視化的全流程；
3、打造業(yè)界領先的分布式計算，存儲系統(tǒng)，解決大規(guī)模生產環(huán)境集群可用性和性能優(yōu)化問題。
任職要求：
1、熱愛計算機科學和互聯網技術，優(yōu)秀的編碼能力，樂于快速學習和嘗試新技術、新工具；
2、對開源大數據系統(tǒng)有相關經驗者優(yōu)先，包括但不限于hadoop/spark/hive/flink/kafka/druid 等；
3、對數據敏感，掌握量化分析方法，善于從數據中發(fā)現問題者優(yōu)先。
第13篇 大數據咨詢經理崗位職責描述崗位要求
職位描述：
崗位職責：
1、根據公司產品定位，開拓大數據商業(yè)化的合作業(yè)務，與客戶建立良好的人際關系，并及時配合產品、銷售部進行數據源挖掘；
2、深入了解公司業(yè)務模型與技術算法邏輯，針對客戶定制化的數據合作需求，提供最優(yōu)解決方案，并協調內部資源推動結果落地；
3、完成公司現有客戶資源的持續(xù)性合作以及銷售線索的跟進，向客戶準確傳達公司服務信息、企業(yè)優(yōu)勢及核心競爭力，為公司樹立良好的市場口碑；
4、參與數據產品的市場定位、運營模式設置、用戶畫像定位等綜合產品打磨工作。
崗位要求：
1、統(tǒng)招本科及以上學歷，數據變現、數據咨詢、運營商合作等相關行業(yè)經驗5年以上；
2、良好的客戶形象和公關能力，具備大數據交易行業(yè)的資深經驗和客戶關系；
3、對市場機會有敏銳的嗅覺，能夠發(fā)現潛在商機；
4、具備一定的大數據專業(yè)基礎和自學能力工作熱情，積極主動，有一定的數據技術背景更佳；
5、人品端正，具有獨立開展工作及團隊合作精神。
第14篇 大數據查詢引擎高級工程師職位描述與崗位職責任職要求
職位描述：
工作職責：
1、研發(fā)業(yè)界領先的交互式數據分析系統(tǒng)，服務于今日頭條全公司的數十個用戶產品線；
2、面向超大規(guī)模數據問題，每天千億增量的用戶行為數據，秒級處理pb級別的數據計算；
3、善于理解和抽象業(yè)務問題，支撐多樣的海量數據分析場景。
任職要求：
1、理解分布式系統(tǒng)，思路清晰，具備生產系統(tǒng)快速 trouble-shooting 的經驗和能力，擅長分析深層次的原因；
2、對市面上常見的 olap 系統(tǒng)設計與源碼有深入研究，給 hive/kylin/presto/spark/tez 等項目提交過 patch者優(yōu)先。
第15篇 大數據研發(fā)專家職位描述與崗位職責任職要求
職位描述：
職責描述：
1、負責全域數據和應用產品的數據體系的建設，通過數據+算法+工程化能力，處理和萃取數據，讓其成為應用和產品的能源；
2、參與大數據基礎架構和技術體系的規(guī)劃建設，包括數據采集平臺、數據資產管理與治理平臺、數據質量及穩(wěn)定性保障體系、數據處理智能化和自動化體系的建設。
3、 以上工作職責有具體的細分，你可以基于你的興趣和愛好選擇不同的方向發(fā)展；
任職要求：
以下能力項不是全部要求，我們有多個細分崗位供您選擇
1、有從事分布式數據存儲與計算平臺應用開發(fā)經驗，熟悉hadoop生態(tài)相關技術并有相關開發(fā)經驗，有spark/flink的開發(fā)經驗尤佳；
2、較為豐富的數據倉庫及數據平臺的架構經驗，精通數據倉庫建模及etl設計開發(fā)；有較為系統(tǒng)的海量數據性能處理經驗；在大數據資產管理與治理有一定成功產品化經驗；
3、具備豐富的大型互聯網日志采集系統(tǒng)設計或架構經驗，具備較扎實的理論基礎和工程能力，熟悉http、http等協議，有ngin_、apache等web服務器上的模塊開發(fā)或子系統(tǒng)的架構設計能力，有ios或android客戶端sdk及服務端架構設計經驗；
4、具備一定的java、python語言的開發(fā)能力，具備機器學習算法能力尤佳；
5、 良好的思維邏輯性、語言表達能力；有較好英語口語能力，將安排海外崗位；
