當前位置:法律諮詢服務網 - 企業資訊 - 大數據開發工程師的基本職責-工作職責

大數據開發工程師的基本職責-工作職責

大數據開發工程師的基本職責-工作職責

在學習、工作和生活中,很多時候,我們會接觸到工作職責。明確崗位職責可以使員工了解和掌握崗位職責,最大限度地進行勞動管理,科學配置人力,做到人盡其才,人崗匹配。應該如何制定崗位職責?以下是我為您整理的大數據開發工程師的基本職責——崗位職責,僅供參考,歡迎閱讀。

大數據開發工程師的基本職責-崗位職責1職責:

1.參與大數據平臺的建設和項目的技術架構。

2、數據分析、挖掘,模型特定產品化;

3.根據產品需求,分析、撰寫、制定大數據相關解決方案。

工作要求:

1,計算機相關專業本科及以上學歷,紮實的編程基礎,2年以上大數據開發經驗。

2、熟悉Hadoop生態和架構,熟悉Flink、Spark、Hive等常用開源工具。

3.熟悉日誌收集系統,如Flume,kakfa和scribe。

4.熟悉主流數據庫(Oracle、postgresql、Mysql、sql Server)的1及以上,有良好的Sql性能調優經驗。

5.有數據倉庫ETL經驗者優先。

6.有用戶行為日誌收集、海量數據處理和數據建模經驗者優先。

7.具備持續學習的能力;喜歡開源軟件,願意分享知識;對工作認真負責;能夠在較大壓力下獨立工作。

大數據開發工程師的基本職責-工作職責2職責:

1,數字貨幣中的數據統計分析,負責數字貨幣中量化投資策略的設計、管理和實際投資操作。

2.與交易員對接,制定可行的策略測試計劃,開發驗證新的策略模型。

3.協助交易員進行交易和風險管理,並對實際交易結果進行量化績效分析,促進交易自動化。

4、上級交辦的其他工作。

要求:

1,數學/計算機/金融專業,算法和機器學習理論基礎紮實。

2.有量化實盤交易經驗,數學建模經驗豐富,數據處理能力強者優先。

3.對金融市場價格波動有獨到的理解和深入的量化分析,有壹定的套期保值策略研究經驗;

4.對數字貨幣領域感興趣,結果導向;

5.有網頁抓取和爬蟲編程經驗者優先。

大數據開發工程師的基本職責-工作職責3項職責:

1.大數據日誌分析系統的設計、選擇和開發;

2.配合各業務提供數據支持,匯總優化產品和運營數據;

3.處理用戶的海量數據,提取、分析、匯總用戶屬性、行為等信息,完成分析結果;

4.發現並指出異常數據,分析數據的合理性;

5.運營維護公司大數據基礎平臺,確保數據平臺服務的穩定性和可用性;

6.大數據基礎平臺的監控、資源管理和數據流管理;

7.基於數據分析的雲平臺可預測彈性擴展解決方案。

要求:

1,日誌分析數據系統實踐經驗;

2.3年以上互聯網行業R&D經驗,具備使用Hadoop/hive/spark分析海量數據的能力;

3.掌握Hadoop、Flume、Kafka、Zookeeper、HBase、Spark的安裝調試;

4.熟悉與大數據相關的數據庫系統、關系數據庫和NoSQL。

5.掌握Linux操作系統的配置、管理和優化,能夠獨立排查和解決操作系統層的各種問題;

6.良好的溝通能力,優秀的計劃和執行能力,責任心強,學習能力優秀。

大數據開發工程師的基本職責-工作職責4項職責:

1,負責數據分析、處理、清洗、加工程序開發;

2.負責數據相關平臺的建設、維護和優化;

3.負責開發基於Hadoop/Spark/Hive/kafka等分布式計算平臺的離線分析和實時分析的計算框架;

工作要求:

1,本科必須211,碩士及以上不限院校,計算機軟件及相關專業。

2.熟悉Java和Scala語言,熟悉常用設計模式,有代碼重構意識;

3.熟練使用hadoop、hbase、Kafka、hive、spark、presto,熟悉底層框架和實現原理;

4.使用Spark Streaming和SPARK SQL進行數據處理,有Spark SQL優化經驗;

5.要求2年以上開發經驗,有flink開發經驗者優先;

6、學習能力強,喜歡研究新技術,有團隊觀念,有獨立解決問題的能力。

大數據開發工程師的基本職責-崗位職責5職責:

1,負責大數據平臺的基礎環境建設和性能優化,完成平臺的搭建和維護,實時流計算平臺、分布式調度、可視化報表等平臺的架構和研發;

2.對各種開源框架進行深入的代碼分析和優化;

3.參與大數據技術解決方案的評審;

4.指導初、中級大數據工程師的工作;

工作要求:

1,計算機相關專業全日制大專及以上學歷,具有3年及以上分布式計算平臺研發經驗;

2。對大數據相關組件有深入了解:Hadoop、Spark、Hbase、Hive、Flink、Kafka、Flume等。,並具備相應的定制和R&D能力,尤其需要精通Flink框架;

3。具備搭建穩定的大數據基礎平臺的能力,具備數據采集、數據清洗、數據倉庫建設、實時流量計算等系統研發經驗;

4。對技術有熱情,有良好的數據思維和敏感度,有壹定的數據分析能力者優先,對深度學習和機器學習有壹定了解者優先;

5。工作有計劃性,責任心和執行能力強,責任心高,工作作風誠實,優秀的溝通能力和團隊合作精神。

  • 上一篇:為什麽有些hr會在朋友圈發布不同公司的招聘信息?
  • 下一篇:公司稅務登記流程
  • copyright 2024法律諮詢服務網