數據研發工程師崗位職責
在充滿活力,日益開放的今天,各種崗位職責頻頻出現,崗位職責主要強調的是在工作范圍內所應盡的責任。大家知道崗位職責的格式嗎?以下是小編收集整理的數據研發工程師崗位職責,希望對大家有所幫助。
數據研發工程師崗位職責1
工作職責:
1、負責品牌廣告業務平臺及其相關系統的研發
2、負責現有系統的問題分析和改進,提高系統性能,保證系統穩定性
3、持續改進系統架構、核心算法或者核心技術等,保證系統高性能、高可用性和高可擴展性
4、新技術預研,完成項目的選型和設計,難點公關
任職要求:
1、本科及以上學歷,一年以上大數據系統開發經驗
2、熟悉python語言,熟練使用linux
3、對常用的redis、kafka等工具系統有一定的了解
4、有大數據集、分布式計算工具(hadoop,spark,hive,storm,es)等應用開發經驗優先
5、有良好的.團隊合作精神,較強的溝通能力
6、愿意深入了解業務知識,并能敏銳的發現業務痛點
7、有品牌廣告系統、dmp、輿情、指數平臺方向開發經驗者優先
數據研發工程師崗位職責2
職位描述:
工作職責:
1、負責字節跳動用戶行為的理解和建模,幫助公司各項業務滿足用戶需求,提升用戶覆蓋;
2、負責在數據建設層面,對用戶隱私進行脫敏處理,保證后續數據研發過程中保護用戶隱私;
3、探索、挖掘公司各項指標、用戶滿意度、用戶增長上的各項規律,并利用這些規律幫助產品提升和擴展,增加用戶滿意度,擴展用戶群體。
任職要求:
1、本科及以上學歷,計算機、統計學、數學等相關專業;
2、強的編程和數據工具運用能力,有hadoop,hive,spark,kafka,elasticsearch或者其他的`大數據工具的使用經驗;
3、對數據倉庫、數據建模有一定認知;有過數據使用相關經驗。
數據研發工程師崗位職責3
職責描述:
基于flink開源大數據計算平臺,在集團整體業務場景下,
1.研發實時流計算數據研發平臺,支持包括核心電商、云計算、大文娛、創新業務在內的等各個綜合業務板塊務;
2.研發實時olap(elasticsearch,druid)賦能業務
3.研發實時智能化(算法加工程)賦能業務
任職要求:
1.具備扎實的計算機理論基礎,對數據結構及算法有較強的功底
2.精通java語言編程,具備優秀的系統debug/profiling能力和經驗
3.熟悉常見的面向對象設計模式,具備優秀的.系統架構設計能力
4.熟悉hadoop/hbase/flink/spark streaming等開源大數據技術,在開源社區活躍者優先
5.熟悉elasticsearch/druid等olap開源技術優先
6.具備實際的大數據業務開發經驗以及良好的項目溝通和協調能力
7.具備實時流計算數據開發經驗、全棧開發經驗優先
數據研發工程師崗位職責4
工作職責:
1、廣告各類在線業務的離線數據加工與在線數據服務開發與維護
2、數據服務接口及產品需求研發迭代,代碼review、bug修復及日常服務運維
3、針對海量數據處理和查詢需求,設計適應業務變化的合理的多維數據分析系統架構,滿足多樣性的`需求
4、海量日志清洗加工,并抽象出可以多業務復用的數據模型
任職要求:
1、熟悉hadoop架構和工作原理,精通mapreduce編程;精通hive,有hql優化經驗
2、有web服務開發經驗,具備獨立完成模塊開發能力,具備大規模分布式服務設計能力和經驗
3、理解基本的設計模式,能將業務需求快速理解成技術需求
4、熟練使用mysql,熟練使用elasticsearch、druid者優先;熟悉其原理者優先
5、善于溝通,工作積極主動,責任心強,具備良好的團隊協作能力
6、具備良好的問題分析與解決能力,有較強學習能力和邏輯思維能力
數據研發工程師崗位職責5
工作職責:
1.負責業務相關的數據平臺建設;
2.包括數據pipeline建設、數據倉庫建設、運營系統建設等;
3.通過海量數據,分析用戶行為,進行特征挖掘建設。
任職要求:
1.工作經驗1-3年,學歷本科及以上;
2.有扎實的`編程能力,有優秀的代碼品位,對解決具有挑戰性問題充滿激情;
3.編程語言不限,有python經驗更佳,熟悉常用算法和數據結構;
4.熟悉常用的開源組件:hadoop/hive/kafka/flink/spark等,并了解其特性和使用場景優先;
5.優秀的溝通理解能力,能快速理解業務,用數據解讀業務。
數據研發工程師崗位職責6
工作職責:
1、負責抖音/火山等多個業務線的策略算法建設與優化工作;
2、通過海量數據,分析與挖掘各種潛在關聯,不斷優化策略效果,保障用戶體驗;
4、負責實時及離線特征抽取、融合,為數據挖掘及策略平臺提供特征服務;
5、負責大數據能力在產品功能上的落地,推動產品數據化和智能化。
任職要求:
1、計算機等相關專業,碩士或以上學歷,3年以上大數據、人工智能相關經驗;
2、熟悉hive/hadoop/spark/flink/clickhouse/druid等大數據開發技術;
3、有良好的業務和產品sense,執行力、推動力強優先;
4、有豐富的.行業經驗,豐富的專業知識,獨特的行業見解,有戰略視野和規劃能力優先;
5、優秀的理解溝通能力,崇尚數據說話,深信數據在驅動業務、支撐決策上的價值優先。
數據研發工程師崗位職責7
工作職責:
1、打造業界領先的通用數據平臺,包括實時數據流、數據倉庫、調度系統、查詢引擎,用戶行為分析,abtest實驗系統等,降低數據的使用門檻,實現數據的最大價值
2、打造業界領先的存儲、計算等分布式系統,為海量數據和大規模業務系統提供可靠的基礎設施
任職要求:
1、熟悉多項大數據領域的'開源框架,e.g. hadoop,hive,presto,storm,spark,kafka,hbase,redis,rocksdb,elasticsearch,druid,etc.
2、強悍的編碼和troubleshooting能力
3、樂于挑戰沒有明顯答案的問題,對新技術有強烈的學習熱情
數據研發工程師崗位職責8
工作職責:
1、針對字節跳動全局性數據分析要求,打造行業領先的數據平臺,對全球用戶數據,打造高效穩定的batch和rt數據流;
2、利用大數據工具,打造計算,傳輸,分析,監控平臺;滿足字節跳動全球用戶產品的'指標計算,多維分析等需求;
3、構建高效穩定的數據服務,支撐字節跳動全球各重要業務的用戶增長。
任職要求:
1、計算機、數學相關專業本科及以上學歷,一年以上大數據開發工作經驗,數據挖掘和bi分析領域優先;
2、熟悉多項大數據領域的開源框架,e.g. hadoop,hive,presto,storm,spark,kafka,hbase,redis,rocksdb,elasticsearch,druid等;
3、強悍的編碼和學習能力;善于發現問題,積極探索原因。
數據研發工程師崗位職責9
xxxxxx有限公司大數據研發高級工程師崗位職責:
1、基于海量數據進行數據挖掘、數據分析;
2、根據實際場景進行業務邏輯開發,優化離線/實時大數據計算任務的性能;
任職要求:
1.計算機、通信、信息安全或相關專業本科及以上學歷;
2.精通java語言開發,熟悉spring,spring mvc,mybatis等流行開源框架;
3.熟悉常用大數據開源組件,對hadoop/hive/spark/hbase中的一項或多項有深入研究,至少1個以上大型成熟項目的經驗,2年以上的大數據產品開發經驗;
4.熟練使用linux和mysql,具有數據庫設計及優化能力;
5.清晰的'邏輯分析和表達能力,熱愛技術,樂于分享,對行業和技術的發展有自己的見解;
數據研發工程師崗位職責10
工作職責:
1、廣告各類在線業務的離線數據加工與在線數據服務開發與維護
2、數據服務接口及產品需求研發迭代,代碼review、bug修復及日常服務運維
3、針對海量數據處理和查詢需求,設計適應業務變化的合理的多維數據分析系統架構,滿足多樣性的'需求
4、海量日志清洗加工,并抽象出可以多業務復用的數據模型
任職要求:
1、計算機相關專業本科以上學歷,熟悉hadoop架構和工作原理,精通mapreduce編程;精通hive,有hql優化經驗
2、熟悉java,python等多種編程技術,編程能力強,有web服務開發經驗,具備獨立完成模塊開發能力
3、理解基本的設計模式,能將業務需求快速理解成技術需求
4、熟練使用mysql,熟練使用elasticsearch、druid者優先;熟悉其原理者優先
5、善于溝通,工作積極主動,責任心強,具備良好的團隊協作能力
6、具備良好的問題分析與解決能力,有較強學習能力和邏輯思維能力
數據研發工程師崗位職責11
csig16-地圖數據web前端研發工程師工作職責:
1.負責騰訊lbs數據web相關產品的技術架構設計與功能實現
2.致力于為用戶提供最專業的位置服務與出行服務
任職要求:
計算機或相關專業本科以上學歷,3年以上web前端開發工作經驗
熟練掌握(精通更好)html5/es6/css3等web開發技能,對vue,webpack等技術非常熟悉;
具有node開發經驗(經驗豐富的.加分)
對web性能有較深的見解和相關處理方案;
對web標準有良好認識,能夠高保真還原設計稿,兼容各種瀏覽器;
具有良好的編程思想和編碼習慣;
具有很強的學習能力和技術敏感度,有強烈的責任心和進取心,樂于學習和技術分享,抗壓能力強。
數據研發工程師崗位職責12
職責描述:
基于flink開源大數據計算平臺,在阿里集團整體業務場景下,
1.研發實時流計算數據研發平臺,支持包括核心電商、云計算、大文娛、創新業務在內的等各個綜合業務板塊務;
2.研發實時olap(elasticsearch,druid)賦能業務
3.研發實時智能化(算法加工程)賦能業務
任職要求:
1.具備扎實的計算機理論基礎,對數據結構及算法有較強的功底
2.精通java語言編程,具備優秀的.系統debug/profiling能力和經驗
3.熟悉常見的面向對象設計模式,具備優秀的系統架構設計能力
4.熟悉hadoop/hbase/flink/spark streaming等開源大數據技術,在開源社區活躍者優先
5.熟悉elasticsearch/druid等olap開源技術優先
6.具備實際的大數據業務開發經驗以及良好的項目溝通和協調能力
7.具備實時流計算數據開發經驗、全棧開發經驗優先
數據研發工程師崗位職責13
工作職責:
1、設計構建智能語音對話數據體系,打造一體化多媒體數據存儲、索引、處理能力
2、打造pb級數據處理引擎,應對日均tb級數據增長
3、你有機會為字節跳動全系產品(頭條、抖音、火山、西瓜等)提供 ai數據處理及索引技術,用數據技術影響數億國內國際用戶
任職要求:
1、擁有計算機及相關專業本科以上學歷,兩年以上c++/java/go/python項目開發經驗
2、精通數據結構和算法設計,熟悉系統性能調優的方式,熟悉linux開發環境
3、玩轉spark/storm/hive等大數據工具,熟知mysql/redis/mongodb等常用數據庫,不再滿足于常規文本處理,渴望挑戰大規模多媒體數據處理任務
4、在acm/noi/ioi/topcoder中打遍天下無敵手,在算法領域追求極致,渴望挑戰更深更廣更帶感的技術算法問題
數據研發工程師崗位職責14
工作職責:
1、廣告各類在線業務的離線數據加工與在線數據服務開發與維護;
2、數據服務接口及產品需求研發迭代,代碼review、bug修復及日常服務運維;
3、針對海量數據處理和查詢需求,設計適應業務變化的合理的多維數據分析系統架構,滿足多樣性的需求;
4、海量日志清洗加工,并抽象出可以多業務復用的數據模型。
任職要求:
1、計算機相關專業本科及以上學歷,熟悉hadoop架構和工作原理,精通mapreduce編程;精通hive,有hql優化經驗;
2、熟悉java,python等多種編程技術,編程能力強,有web服務開發經驗,具備獨立完成模塊開發能力;
3、理解基本的設計模式,能將業務需求快速理解成技術需求;
4、熟練使用mysql,熟練使用elasticsearch、druid者優先;熟悉其原理者優先;
5、善于溝通,工作積極主動,責任心強,具備良好的'團隊協作能力;
6、具備良好的問題分析與解決能力,有較強學習能力和邏輯思維能力。
數據研發工程師崗位職責15
崗位職責:
1.參與建設投融資數據體系,持續集成相關工具產品,以及搭建大數據業務統一計算層等相關工作;
2.參與公司數據倉庫的架構設計和研發,挖掘數據價值,實現高質量數據的'互通與共享;
3.助力數據化運營業務,構建豐富多樣的bi應用;
4.對數據采集、數據融合、數據質量、數據應用鏈路有深入理解,并能協助業務數據集市建設,搭建業務領域模型。
任職要求:
1.數學、計算機、統計學等相關專業本科以上學歷,5年以上相關工作經歷;
2.從事數據倉庫領域至少5年以上,熟悉數據倉庫模型設計與etl開發經驗;
3.有從事分布式數據存儲與計算平臺應用開發經驗,熟悉hadoop生態相關技術并有相關實踐經驗著優先,重點考察hdfs、mapreduce、hive、hbase;
4.有實時etl研發經驗,對分布式實時大數據處理系統有深入理解,包括但不限于spark streaming、flink、storm...;
5.熟悉數據倉庫領域知識和技能者優先,對數據質量管理有獨到的見解;
6.業務sense,能夠通過梳理設計業務模型發現業務問題,并驅動業務目標實現;
7.有neo4j,word2vec經驗優先。
數據研發工程師崗位職責16
崗位職責:
1、研究空間大數據前沿技術,參與空間大數據分析平臺的設計和開發;
2、與算法工程師對接,參與空間大數據分析算法的代碼實現;
3、其它相關的`gis開發工作;
任職資格:
1、計算機、地理信息等相關專業背景,本科及以上學歷;
2、對空間數據結構有深刻理解,熟悉空間數據庫引擎;
3、扎實的編程基礎,能夠熟練運用java/scala語言;
4、熟悉大數據管理系統和分布式計算框架,如:hbase、cassandra、mongodb、spark/flink等;
5、熟悉gis領域主流的分布式數據存儲方案,有geomesa、geowave、geotrellis、geoserver、geotools、arcgis soe使用經驗者優先;
6、具備較強的學習創新能力,能夠通過快速學習解決實際問題;
【數據研發工程師崗位職責】相關文章:
c研發工程師崗位職責10-08
機械研發工程師崗位職責12-02
食品研發工程師的崗位職責09-06
數據挖掘工程師崗位職責06-04
數據庫工程師崗位職責10-20
數據挖掘工程師工作的崗位職責11-29
大數據開發工程師崗位職責12-13
高級大數據工程師崗位職責12-14
大數據架構工程師崗位職責12-14