- 目錄
-
第1篇 大數(shù)據(jù)開發(fā)工程師(杭州)職位描述與崗位職責任職要求
職位描述:
崗位職責:
1.參與大數(shù)據(jù)精準學平臺設計與研發(fā),在大數(shù)據(jù)采集、存儲、分析及應用領域都會有所涉及。
2.參與需求分析、系統(tǒng)架構設計、并完成需求設計相應文檔的編寫。
3.參與核心代碼實現(xiàn)、系統(tǒng)性能優(yōu)化。
4.保質保量地完成項目組分配的開發(fā)任務。
5.協(xié)助項目經(jīng)理進行技術支持工作,共同解決產(chǎn)品研發(fā)過程遇到的技術難題。
任職要求:
1. 具備3年及以上大數(shù)據(jù)系統(tǒng)開發(fā)經(jīng)驗,計算機相關專業(yè)本科及以上學歷;
2. 有實時流處理經(jīng)驗,掌握flink、storm等實時處理框架;
3. 熟悉并會使用spark mllib、機器學習、自然語言處理等相關技術和算法;
4. 具有hadoop/spark,以及kafka、flume、hbase、hive、zookeeper等大數(shù)據(jù)生態(tài)圈實際開發(fā)經(jīng)驗。深入了解hadoop/spark生態(tài)圈產(chǎn)品的工作原理及應用場景;
5. 具備較強的數(shù)據(jù)分析,問題分析,邏輯思維能力,良好的溝通,團隊協(xié)作能力。
第2篇 java大數(shù)據(jù)開發(fā)高級工程師崗位職責職位要求
職責描述:
崗位要求:
1、計算機或相關專業(yè)本科以上學歷,3年以上專業(yè)java開發(fā)經(jīng)驗,有過大型項目經(jīng)驗優(yōu)先;
2、精通 jdbc、jsp / ibatis /spring/ struts2等java主流技術;
3、熟悉web容器及主流開源框架,熟悉http的基本工作原理;
4、熟悉io、多線程、集合類等基礎框架,熟悉緩存、消息、搜索等機制;
5、熟悉linu_操作系統(tǒng),熟悉mysql數(shù)據(jù)庫;,精通sql語言;
6、有大型項目架構設計開發(fā)和數(shù)據(jù)庫優(yōu)化經(jīng)驗優(yōu)先;
7、具有良好的團隊協(xié)作精神,較強的溝通能力,具備良好的問題定位分析能力和新興技術學習能力。
崗位職責:
1.負責研發(fā)公司自主呼叫中心產(chǎn)品;
2.協(xié)助實施部門定位跟蹤產(chǎn)品問題;
3.客戶化項目定制開發(fā)
崗位要求:
學歷要求:大專
語言要求:不限
年齡要求:不限
工作年限:3-5年
第3篇 高級數(shù)據(jù)開發(fā)工程師職位描述與崗位職責任職要求
職位描述:
職責描述:
1、承擔現(xiàn)有數(shù)據(jù)平臺的開發(fā)和優(yōu)化工作
2、根據(jù)業(yè)務需求進行數(shù)據(jù)模型的調(diào)研、設計、開發(fā)及驗證工作,并持續(xù)進行模型優(yōu)化
3、負責數(shù)據(jù)模型架構的構建,建立數(shù)據(jù)抽取、清洗、校驗等數(shù)據(jù)加工流程規(guī)范及olap多維數(shù)據(jù)分析模型
4、負責實時計算平臺搭建。
職位要求:
1、3-5年以上的相關工作經(jīng)驗
2、熟悉分布式計算平臺
3、有日志采集,數(shù)據(jù)處理,數(shù)據(jù)倉庫建模,etl等經(jīng)驗
4、熟悉java、python、spark開發(fā)
5、熟練掌握linu_ shell及sql語言
6、有獨立負責數(shù)據(jù)某一模塊的實際項目經(jīng)驗
7、有過用戶畫像等方面開發(fā)經(jīng)驗者優(yōu)先
8、有實時處理開發(fā)經(jīng)驗者優(yōu)先
第4篇 健康科技中心-高級大數(shù)據(jù)開發(fā)工程師職位描述與崗位職責任職要求
職位描述:
職位描述:
1. 基于hadoop生態(tài)系統(tǒng)進行大數(shù)據(jù)平臺建設;
2. 負責各業(yè)務條線相關指標數(shù)據(jù)的數(shù)據(jù)建模
3. 負責基于sqoop,hive、spark、sparksql、mysql進行大數(shù)據(jù)開發(fā)
4. 負責離線運算、實時計算平臺項目的設計、開發(fā)及運維
5. 負責對數(shù)據(jù)平臺進行性能調(diào)優(yōu)
任職要求:
1.統(tǒng)招本科或以上學歷,6年以上大數(shù)據(jù)開發(fā)工作經(jīng)驗;
2.熟練掌握shell、python開發(fā)語言;
3.熟練掌握hadoop、hive、hbase、spark、spark sql、storm、sqoop、kafka、flume、sparkmlib等分布式框架原理,有相關的調(diào)優(yōu)、運維、開發(fā)經(jīng)驗;
4.熟練掌握mysql數(shù)據(jù)庫集群;
5. 精通主流etl開發(fā)工具,如:informatica、data services、kettle;精通主流調(diào)度工具,如:azkaban, oozie;
6.有數(shù)據(jù)倉庫、分析系統(tǒng)、用戶畫像等產(chǎn)品開發(fā)經(jīng)驗者優(yōu)先;
7.有較強的數(shù)據(jù)和業(yè)務結合能力;
8.有醫(yī)療或者大健康背景優(yōu)先;
9.有較強的獨立、主動的學習能力,良好的溝通表達能力。
第5篇 大數(shù)據(jù)開發(fā)經(jīng)理職位描述與崗位職責任職要求
職位描述:
崗位職責:
1、參與大數(shù)據(jù)平臺、工具平臺的架構、設計以及實現(xiàn);
2、參與對項目的開發(fā)需求進行評審,制定項目的設計文檔、開發(fā)計劃文檔等;
3、負責公司各類數(shù)據(jù)產(chǎn)品數(shù)據(jù)抽取、清洗,以及數(shù)據(jù)算法與存儲的設計和優(yōu)化;
4、優(yōu)化大數(shù)據(jù)平臺的性能,提高穩(wěn)定性;
5、負責大數(shù)據(jù)平臺的組件升級與參數(shù)優(yōu)化。
崗位要求:
1、本科及以上學歷,3年以上相關技術背景,具備扎實的數(shù)據(jù)結構和算法基礎,扎實的工程實現(xiàn)能力;
2、熟悉hadoop大數(shù)據(jù)相關技術體系,包括但不限于hbase、hdfs、storm、kafka、spark、hive、flume等;
3、精通java或python,能熟練編寫規(guī)范代碼,有較強的數(shù)據(jù)庫及sql開發(fā)調(diào)優(yōu)能力;
4、熟悉自然語言處理/機器學習/數(shù)據(jù)挖掘領域,熟悉常用的機器學習算法優(yōu)先考慮;
5、有大規(guī)模數(shù)據(jù)收集,日志處理經(jīng)驗,有電商數(shù)據(jù)分析背景優(yōu)先考慮;
6、深入研究過大數(shù)據(jù)框架的運行機制、實現(xiàn)原理、源碼者優(yōu)先考慮。
第6篇 大數(shù)據(jù)開發(fā)工程師/架構師職位描述與崗位職責任職要求
職位描述:
1、8年以上后端開發(fā)經(jīng)驗,有大數(shù)據(jù)處理經(jīng)驗;有實時處理工作經(jīng)歷并有一定解決方案者優(yōu)先;
2、熟悉大數(shù)據(jù)開源技術,包含(不限于)hadoop/spark/storm/hive/hbase/impala /flume/kafka/solr/es分布式框架/計算/存儲/檢索等相關技術,并有一定的hadoop生態(tài)系統(tǒng)運維經(jīng)驗;
3、至少掌握java/scala/python其中一門開發(fā)語言;
4、掌握sql,sparksql進行數(shù)據(jù)開發(fā);較好的sql性能調(diào)優(yōu)經(jīng)驗;
5、優(yōu)秀的分析、解決問題能力,充分的數(shù)據(jù)敏感度;有一定的高性能支撐經(jīng)驗和故障排除能力;
6、具備強烈的工作責任感,喜歡鉆研,態(tài)度樂觀,團隊意識強。
第7篇 大數(shù)據(jù)開發(fā)架構師職位描述與崗位職責任職要求
職位描述:
大數(shù)據(jù)架構師
崗位描述:
1. 負責公司大數(shù)據(jù)基礎框架的整體架構設計,結合公司實際業(yè)務情況進行技術選型;
2. 負責數(shù)據(jù)存儲、計算平臺的整體評估、設計以及核心功能模塊的開發(fā);
3. 協(xié)助團隊解決開發(fā)過程中的技術難題,負責新技術的調(diào)研,并能在團隊內(nèi)推廣應用;
崗位要求:
1. 計算機相關專業(yè)本科以上學歷,5年以上工作經(jīng)驗,3年以上大數(shù)據(jù)相關經(jīng)驗;
2. 熟悉常用的數(shù)據(jù)結構、算法以及數(shù)據(jù)建模理論;
3. 有過支撐每日億級別數(shù)據(jù)的大數(shù)據(jù)平臺建設經(jīng)驗,了解數(shù)據(jù)倉庫實施方法論、了解數(shù)據(jù)倉庫體系,并支撐過實際業(yè)務場景;
4. 具備較強的編碼能力,掌握 java/scala/python 開發(fā)語言之一,熟練使用 sql 進行數(shù)據(jù)訪問;
5. 精通 hadoop 生態(tài)系統(tǒng)基礎設施,包括flume、kafka、hbase、hive、spark、storm等;
6. 有團隊管理經(jīng)驗者優(yōu)先;
第8篇 后端數(shù)據(jù)開發(fā)工程師職位描述與崗位職責任職要求
職位描述:
職責描述:
1. 配合產(chǎn)品經(jīng)理,參與數(shù)據(jù)平臺發(fā)展各階段產(chǎn)品需求分析和功能設計;
2. 基于確定的產(chǎn)品功能需求,參與平臺后端系統(tǒng)架構設計、接口定義實現(xiàn)及測試、構建部署和運維等各階段工作;
3. 根據(jù)產(chǎn)品或技術實現(xiàn)發(fā)展需要,按需進行一些新技術的研究,并評估將其引入現(xiàn)有平臺實現(xiàn)的可行性。
任職要求:
1. 本科及以上學歷,至少3年及以上的實際開發(fā)經(jīng)驗;
2. 熟練掌握c/c++/python/java/go/javascript其中至少2種及以上程序設計語言,并且自認為具有良好的編程素養(yǎng);
3. 熟練掌握常用的數(shù)據(jù)結構及算法;
4. 熟悉linu_系統(tǒng)開發(fā),熟悉網(wǎng)絡編程、文件系統(tǒng),有分布式系統(tǒng)開發(fā)經(jīng)驗;
5. 應具有熟練的技術領域相關的英文文獻閱讀能力;
6. 有良好的溝通能力和團隊合作能力,能夠自主驅動,具備良好的問題定位分析能力。
優(yōu)先考慮:
1. 熟悉containerization和virtual machine平臺和相關技術,熟悉docker、kubernetes和kvm等,并具有相關的實際運用經(jīng)驗;
2. 熟悉當前主流的云計算平臺,如應熟悉aws、azure和阿里云其中至少一種平臺的iaas,并具有相關的項目經(jīng)驗;
3. 有開源項目實際參與經(jīng)驗。
第9篇 數(shù)據(jù)開發(fā)崗位職責數(shù)據(jù)開發(fā)職責任職要求
數(shù)據(jù)開發(fā)崗位職責
職責描述:
1、建立數(shù)據(jù)質量控制體系,對公司各項數(shù)據(jù)進行檢驗,保證數(shù)據(jù)的準確性。
2、獨立完成數(shù)據(jù)開發(fā)相關工作,例如爬蟲、指標庫編寫等。
3、承擔其他數(shù)據(jù)工作,例如數(shù)據(jù)采集、數(shù)據(jù)處理、指標數(shù)理、指標提取等。
任職要求:
1、3年以上相關工作經(jīng)驗,計算機及相關專業(yè)本科以上學歷,有證券、基金等金融行業(yè)工作背景優(yōu)先。
2、編程基本功扎實,精通c/c++/java/go/c#任意一種語言,熟悉python/shell等任意一門腳本語言。
3、精通mysql、oracle等關系數(shù)據(jù)庫;熟悉mongodb、redis等非關系型數(shù)據(jù)庫。
4、具有數(shù)據(jù)敏感性,良好的數(shù)據(jù)分析與報告能力。
5、積極主動,責任心強,具有良好的對外溝通和團隊協(xié)作能力。
第10篇 大數(shù)據(jù)開發(fā)主管職位描述與崗位職責任職要求
職位描述:
崗位職責:
負責大數(shù)據(jù)平臺項目架構設計;
負責與客戶進行具體業(yè)務需求溝通,引導客戶需求并確認;
負責需求分析以及平臺設計、數(shù)據(jù)模型設計工作,并輸出相關文檔,與第三方進行溝通,并確認項目關鍵節(jié)點進度。
任職要求:
國家正規(guī)院校統(tǒng)招本科以上學歷,有5年以上工作經(jīng)驗,至少1年以上大數(shù)據(jù)架構師工作經(jīng)驗、熟悉大數(shù)據(jù)平臺項目的操作流程;
熟練掌握python、hadoop、spark、kafka等工具;
較好的溝通理解能力和主動性。
第11篇 java大數(shù)據(jù)開發(fā)職位描述與崗位職責任職要求
職位描述:
職責描述:
1. 參與大數(shù)據(jù)平臺和大數(shù)據(jù)處理框架的架構規(guī)劃設計;
2. 參與數(shù)據(jù)治理工作,提升數(shù)據(jù)易用性及數(shù)據(jù)質量;
3. 理解并合理抽象業(yè)務需求,發(fā)揮數(shù)據(jù)價值,主動思考不斷優(yōu)化,與業(yè)務團隊緊密合作;
4. 配合大數(shù)據(jù)負責人完成hadoop、spark等集群的管理、優(yōu)化和維護,保證集群規(guī)模持續(xù)、穩(wěn)定。
任職要求:
1. 兩年以上相關工作經(jīng)驗;
2. 熟練掌握java語言,熟練使用linu_,強悍的編碼和處理問題能力;
3. 熟悉大數(shù)據(jù)開源棧spark/hadoop、hive、hbase、elasticsearch、kafka、redis, strom/spark-streaming/flink,有至少tb以上級大數(shù)據(jù)處理經(jīng)驗. 有sparkstreaming的實時統(tǒng)計開發(fā)經(jīng)驗優(yōu)先;
4. 對數(shù)據(jù)敏感,認真細致,善于從數(shù)據(jù)中發(fā)現(xiàn)疑點;
5. 善于溝通,具備優(yōu)秀的技術與業(yè)務結合能力;
6. 學習能力強,喜歡研究開源新技術,有團隊觀念,具備獨立解決問題的能力
第12篇 dmp數(shù)據(jù)開發(fā)工程師-核心廣告系統(tǒng)職位描述與崗位職責任職要求
職位描述:
工作職責:
1、支撐dmp人群包計算的業(yè)務需求,參與服務端代碼開發(fā);
2、支撐dmp標簽的技術升級,參與數(shù)據(jù)產(chǎn)出流程性能優(yōu)化;
3、支持dmp大規(guī)模數(shù)據(jù)的計算和分析。
任職要求:
1、本科及以上學歷,計算機、通信等相關專業(yè),1-2年相關工作經(jīng)驗;
2、有良好的數(shù)據(jù)結構、算法基礎和扎實的編程能力;
3、熟悉python/java/c++/scala其中任意一門或者多門語言;
4、熟悉hadoop/kafka/spark/storm/flink/hive其中的若干技術;
5、具有良好的團隊溝通意識和快速學習能力;
6、加分項: 熟悉大數(shù)據(jù)處理或者dmp業(yè)務.
第13篇 大數(shù)據(jù)開發(fā)leader職位描述與崗位職責任職要求
職位描述:
崗位職責:
1、負責整體大數(shù)據(jù)平臺體系的建設工作。
2、負責帶領團隊完成基于大數(shù)據(jù)平臺的業(yè)務項目的開發(fā)、實施和維護工作。
3、負責解決大數(shù)據(jù)平臺建設過程中的技術難點和性能調(diào)優(yōu)工作。
4、負責指導和培訓團隊成員,共同提升大數(shù)據(jù)技能。
任職要求:
1、計算機相關專業(yè),至少5年以上大數(shù)據(jù)開發(fā)經(jīng)驗;
2、熟悉大數(shù)據(jù)、數(shù)據(jù)倉庫,分布式架構技術理論,具有大數(shù)據(jù)整體系統(tǒng)架構設計和實戰(zhàn)經(jīng)驗,,有從無到有建設大數(shù)據(jù)平臺經(jīng)驗者優(yōu)先;
3、熟悉大數(shù)據(jù)生態(tài)圈技術,不限于hadoop、hdfs、hive、hbase、spark、storm、flume、sqoop、kylin等,閱讀過底層源碼者優(yōu)先;
4、熟悉至少一種編程語言,python,java,scala等,精通sql;
5、2年以上技術團隊管理經(jīng)驗,有阿里,百度,騰訊,滴滴,美團等互聯(lián)網(wǎng)大數(shù)據(jù)工作經(jīng)驗者優(yōu)先;
6、邏輯思維清晰,具備高度的責任感和良好的溝通協(xié)調(diào)能力,遇事積極主動。
第14篇 高級大數(shù)據(jù)開發(fā)工程師職位描述與崗位職責任職要求
職位描述:
崗位職責:
1. 基于公司大數(shù)據(jù)產(chǎn)品進行數(shù)據(jù)開發(fā),包括數(shù)據(jù)的采集,清洗,預處理,存儲,建模,分析挖掘等
2. 根據(jù)業(yè)務用戶需要分析數(shù)據(jù),提供數(shù)據(jù)支持
3. 參與公司大數(shù)據(jù)產(chǎn)品的運維和監(jiān)控,保障數(shù)據(jù)質量和服務穩(wěn)定性
任職要求:
1. 具備本科以上學歷, 計算機, 軟件以及相關專業(yè), 5年以上大數(shù)據(jù)開發(fā)經(jīng)驗
2. 熟悉數(shù)據(jù)倉庫維度建模, 并能根據(jù)客戶需求進行數(shù)據(jù)開發(fā), 向模型更新數(shù)據(jù)
3. 使用過至少一種以上的etl工具
4. 熟練掌握java, 對hadoop相關的技術和組件(hdfs, mr, hbase, hive, spark, storm, kafka等)有全面深入了解
5. 熟練掌握shell或者python中的一種
6. 具備spark開發(fā)經(jīng)驗者優(yōu)先
7. 具備實時計算(kafka+storm/spark streaming) 經(jīng)驗者優(yōu)先
8. 具備數(shù)據(jù)分析和數(shù)據(jù)挖掘方面經(jīng)驗者優(yōu)先
第15篇 大數(shù)據(jù)開發(fā)工程師(駐場開發(fā))職位描述與崗位職責任職要求
職位描述:
崗位職責:
(1)根據(jù)業(yè)務進行數(shù)據(jù)需求的調(diào)研、設計、開發(fā)及驗證工作,并持續(xù)進行數(shù)據(jù)業(yè)務的優(yōu)化;
(2)負責大數(shù)據(jù)整體設計和開發(fā)工作,包括數(shù)據(jù)接入、清洗、計算、校驗等數(shù)據(jù)加工流程,并沉淀文檔;
(3)持續(xù)對系統(tǒng)的技術架構進行改進和優(yōu)化,提升海量數(shù)據(jù)的查詢性能和用戶體驗。
(4)此崗位需駐場開發(fā)半年左右(地點:新疆)
任職資格:
(1)統(tǒng)招本科或以上學歷,計算機、數(shù)學等相關專業(yè),工作至少3年以上;
(2)熟悉java/scala開發(fā),有腳本語言(shell,python)開發(fā)經(jīng)驗者優(yōu)先;
(3)至少熟悉一種大數(shù)據(jù)處理棧技術,如hadoop、spark; 熟悉流計算應用開發(fā),如spark streaming, flink;熟練掌握大數(shù)據(jù)生態(tài)各個工具的原理及使用,如hive, sqoop, kafka等
(4)掌握hbase、redis、elastic search等開源大數(shù)據(jù)存儲技術,并能結合不同的業(yè)務場景深入使用;
(5)熟悉storm,spark streaming,flink,beam至少一種
(6)熟悉kafka,redis,es等相關組件
(7)對解決具有挑戰(zhàn)性的數(shù)據(jù)問題充滿激情,具有良好的分析問題和解決問題的能力,能夠勝任部分數(shù)據(jù)分析,挖掘,建模工作。