技術部-Data Engineer
精熟 Computer Science 相關知識(例如:演算法,資料結構,OOP,design pattern等) 精熟 Python 語言 擁有分散式資料處理架構的運行與部屬的相關知識(例如 Spark、Hadoop、Trino/Presto) 熟悉關聯式資料庫的運用(例如 MySQL、PostgreSQL) 熟悉 Linux 系統 擁有資料處理的排程工具知識(Oozie, Luigi, Airflow 等) 你是否渴望在充滿創造力和挑戰的領域中施展拳腳?我們正在尋找充滿激情、敢於挑戰極限的資料工程師,加入團隊,一起探索未知、攜手打造數據科技的新境界!我們負責搜尋系統,推薦系統與數據平台的相關技術,資料工程師們每天的日常包含: 建立並管理雲端的自動化數據搜集系統,作為下游各項機器學習模型與BI系統的資料源頭。 選擇,設計並部署數據倉庫(湖)結構並實作,以滿足不同單位的需求。 與機器學習工程師們協作,優化搜尋與推薦的模型與邏輯。 提供搜尋與推薦的後台API,供前端網頁或是App 顯示用戶頁面。 若你想為企業的數位化轉型提供優質的解決方案,與我們一同挑戰數據平台的極限,打造高效、穩定、靈活的工程系統,同時與多元化的團隊協作,參與各種從大數據處理到人工智慧的專案,歡迎加入我們。本職缺的技術面試流程會以兩階段進行: 30分鐘內的線上簡單程式撰寫 1-2小時到公司實地與同仁進行技術討論 【團隊文化】扁平化的組織架構,適才適所、能發揮自己對產品或技術的想法。就事論事、用數據及事實溝通。隨時歡迎提出建議及看法、達成共識後即快速執行、遇到問題也願意共同面對並解決。技術及非技術的分享會、讀書會、專題講座,希望大家都能跟著公司一起前進成長。 【我們希望你有的特質】對數據相關的事物有相當的熱情具有建構資料倉儲平台所需的相關技術熱衷於建構快速、高穩定且易擴充的運算平台良好的溝通能力,並樂於增進自我、學習以及分享新技術公司地址:
台灣 臺北市其他:
熟悉 Cloud service的元件與ETL工具 (例如 GCP/Bigquery, Dataflow, Dataproc, GCS, ...) 熟悉大數據相關架構(Kylin、Presto、Hive、Elasticsearch) 具 Streaming 的實務經驗(例如 Spark-streaming) 具 Web API 開發的實務經驗 具 NoSQL 的實務經驗(例如Hadoop、Redis、MongoDB) 具 Message Queue 的實務經驗(例如 PubSub、Kafka、RabbitMQ) 具 ML相關技術(Tensorflow, Pytorch, Keras) 具 Java/Tomcat相關經驗,或搜尋引擎(Solr, Elasticsearch)相關經驗 -2024-11-19