余思萱

Data Engineer

  台灣, 新北


我是Yvette,現職為技術接案工作者,專長是爬蟲、資料處理(ETL, Data pipeline),過去任職於孚創雲端的資料工程師,有五年Java開發、MongoDB  Cluster維運經驗。

在孚創雲端就職期間,常與專利專業人員和客戶支援部等跨職能協作,具有良好的跨部門溝通能力。在團隊中與成員互動良好,常共同討論、支援以解決問題,透過讀書會互相學習,也會協助新人訓練。身為資料工程師,我的決策與建議以數據為依據,且有良好的時程管理能力。閒暇時,除鑽研技術,也關注開放資料,曾和朋友組團,以透明薪資為主題開發產品Job Sweeper。

如果您想找一位有開發經驗,且有良好溝通、團隊協作能力,並且對產品有熱情的人,歡迎與我聯繫!期待能加入快節奏、積極自學和有開放溝通環境的團隊。

  | [email protected]

經歷

數據工程師 • InQuartik Co. (孚創雲端),2016/07-2021/07

  • 主要以Java開發,熟悉Hibernate, myBatis, JDBC shading, mongoDB Driver, AWS API。
  • 熟悉AWS服務(EC2, S3, RDS)。
  • 任務排程用Jenkins,另寫shell script客製化排程工作。
  • 研究資料時,會用JavaScript對MongoDB進行較複雜的操作,進而得到統計數字。
  • 每週處理超過50G、上百萬筆多種格式資料,包括xml,  json, html, text…等等。設計不同ETL workflow達到自動化資料更新、retry、發送通知或警告。
  • 使用設計模式,開發有彈性且良好的框架。
  • 跨部門協作中,優化訊息處理,縮短50%承諾時間。
  • JDBC Sharding將兩億筆資料分散在多台資料庫,不用提高IOPS,達到相同的response time,減少4800 USD/月支出。
  • postgreSQL串流方式,每周更新兩億筆數據至雲端,並讓資料庫一秒以內達到藍綠部署。
  • Docker建置並維運多座MongoDB 分散式系統,使用者跨三個部門。使用者情境決定sharding策略讓多人同時大量寫入和讀取,用Grafana監控。通過google chat預警,以避免系統癱瘓。

大數據分析師養成班學員 • 中壢資策會,2015/12 - 2016/06

  • 共同帶領六人團隊完成產品 Job Sweeper。

  • 設計產品架構,為歷任大數據分析班第一個有完整架構的產品,包含App(chrome extension)、API(GCP)和Database(MongoDB)。

  • 在毫無App開發經驗下,自學JavaScript,短時間內完成chrome extension開發。

  • 用自然語言處理(NLP)將公司資訊連結到薪資資訊。

  • 曾以此題參與 g0v hackathon 19th 8分鐘短講。

學歷

國立中央大學

碩士 • 物理 • 2011 - 2015

  • Thesis : Dynamics of monomers and dimers in melting transition in an air table system.  

  • Physical Annual Meeting - Melting transition and positional/orientational order of dimer particles on 2D air bed.

    - Poster 2014年2月1日
  • Complex System Symposium - Melting transition and positional/orientational order of dimer particles on 2D air bed.

    - Oral 2013年6月1日
  • Physical Annual Meeting - Grand Boundary in 2-D System Physical Annual Meeting 

    - Poster 2012年1月1日

國立中央大學

學士 大氣系太空組 • 2006 - 2010

專業技能

程式語言


  • Java
  • Python

其他資訊相關


  • MongoDB
  • PostgreSQL, MySQL, MariaDB
  • Linux
  • Git
  • Jenkins
  • Docker
  • AWS Service
  • Markdown

教育與語言


  • 國立中央大學物理系碩士
  • 中文:精通
  • 英文:中等

專案介紹與活動經歷

Job Sweeper & g0v hackathon 8分鐘短講

Job Sweeper為一個chrome extension,安裝後可讓chrome使用者在瀏覽104、1111、yes123...等求職網時,顯示該公司相同或類似職缺,或是其他公司相同職缺之薪資資訊,同時也會顯示在ptt討論關於該公司之文章連結。

demo video

AWS Summit,2019

代表公司參加2019 AWS Summit,聽了透過AWS產品將專案轉化成microservices, serverless的案例,回去後試著導入docker+EC2, awes lambda 進入專案中 

Powered By CakeResume