oct. 2021 - Présent
職務內容
1. 數據工程:設計data pipeline,做ETL,主要使用AWS雲服務。
2. API串接:根據應用需求,串接API。
專案經歷
【數據治理平台】:將數據定義、數據清洗以及數據驗證整合,建立跨部門內部共識,設立相關權限,使得數據能夠統一且具有應用價值。
【會員圖譜】:使用Airflow自動排程串接GA API以及平台會員數據,再透過NebulaGraph將數據圖譜化,呈現會員深層節點關係。
【日誌事件pipeline】:透過AWS雲服務,Kinesis、S3、Glue以及Athena整合數據的搜集、清洗、轉換以及查詢。
【應用服務API串接】:公司內部產品、外部提案應用服務API串接。