大數據算法工程師
大數據算法工程師
發布日期：2024/11/13 13:09:15
分享到：
崗位職責：
1.根據業務需求開展數據清洗、預處理和特征工程等工作。
2.負責大數據架構的規劃設計，參與業務建模及數據化運營平臺的搭建、運維，對業務流程與大數據的結合提出建議和解決方案。
3.進行數據探索和可視化分析，挖掘數據中的模式、規則、規律、趨勢等。
4.從文獻資料或數據庫中提取數據規律，并依照業務規則，設計算法生成模擬數據。
5.探索和引入新的數據挖掘和機器學習技術，提高算法的預測準確性和運行效率。
6.完成基于大數據平臺的業務項目的開發、實施和維護工作。
任職資格
1.碩士及以上學歷，大數據/計算機/數學/統計學等相關專業。
2.熟悉大數據、數據倉庫、湖倉一體、分布式架構技術理論，具備大數據整體系統架構設計和實戰經驗。
3.熟悉大數據組件的開發編譯、搭建、維護以及性能優化。
5.精通Hadoop生態，在Hive、Hudi、Kudu、Flink、Spark、Presto等大數據技術方面有相關應用經驗，能閱讀源碼跟蹤問題。
6.精通使用相關開發語言(Java/Python/Scala/Shell等)之一。
7.精通掌握Spark、flink任意一種計算框架，掌握MapReduce計算框架原理，并有實際項目開發經驗。
8.精通大數據安全組件kerberos、ranger組件搭建及維護、開發。
9.精通數據挖掘、機器學習和統計學等相關理論，熟悉常用的數據挖掘和機器學習工具和框架，如pandas，numpy，matplotlib, scikit-learn等。
10.具有良好的團隊合作和溝通能力，能夠與團隊成員和其他部門合作推進項目。
上一篇：沒有了
下一篇：市場營銷專員（電氣方向）
查看更多案例