公司名稱: 國泰金控 Cathay Financial Holdings
[ 必要條件 ]
- 具 2 年以上 Python 軟體開發經驗
- 熟悉 Spark 程式開發且了解 Spark 架構如 Dataframe
- 具備至少一次參與基於 Hadoop 或 Spark 的軟體開發專案
- 熟悉 Hadoop,Hive 及其他相關生態系服務
- 熟悉 Git 版控機制
- 熟悉 Linux 系統
[ 加分條件(非必要)]
- 具備軟體產品開發經驗
- 具備大量數據處理經驗
- 具備其他分散式資料庫 SQL/NoSQL 架構知識,如 Hive, Teradata, MongoDB, Oracle, ELK, Redis
- docker 基本操作能力
- 具備 streaming data 處理經驗並熟悉串流資料處理工具,如 Kafka, Flink, Spark Structured Streaming
- 具備基礎資料分析概念
- 具備圖學資料處理經驗
- 具備基本機器學習或深度學習相關知識
- 熟悉 Scrum 等敏捷式開發模式
- 善橫向跨部會溝通,表達能力佳
- 具專案管理能力
我們 資料科學實驗室 的文化
- 我們樂於互相分享,也樂於互相學習
- 我們有主動發現問題,主動解決問題的特質
- 我們的討論風氣興盛,沒有階級之分
我們 資料科學實驗室 正在尋找的數據工程專家,將負責數據工程相關的創新技術研究、概念性驗證與程式開發,依照個人技術能力與發展安排,可能包含但不限如下相關內容:
- 資料 ETL 相關創新技術研究
- 基於 Spark ETL 技術,研發創新產品
- 基於 Python 語言之產品開發,推廣及後續維護
- 與數據分析師合作,進行機器學習、深度學習與統計分析模型最佳化的研究與開發