Software Engineer

睿擎科技股份有限公司

十月 2019 - Present
Taipei, Taiwan

• 網路爬蟲、網頁內容自動化擷取系統之開發經驗：
  • 使用Python 3.7, Flask, SQLite協助我國中央衛政單位開發化妝藥品廣告違規過濾、分類以及即時數據分析系統。
  • 使用git進行協作。
  • 此系統大幅縮減客戶以人工方式檢索網頁的時間，並導入文字探勘模組，如SVM、Word2Vec、WordCloud等，提供客戶進行決策。
    
• 即時監控系統開發：
  
  • 根據客戶需求，與技術團隊進行系統分析與功能雛形開發。
  • 使用TortoiseSVN進行協作。
  • 使用ASP.NET MVC開發即時監控系統，並針對超過5種不同身份的使用者進行功能權限控管。
  • 與2019年相比，系統運行至今，已經協助客戶轄內之業者與管理區域降低83%的食品中毒發生機率。
    
• 即時監控系統導入數據分析、開發即時互動式圖表：
  
  • 使用Python 3.7, ASP.NET MVC, D3.js與Plotly.js開發互動式圖表，資料來源為每日透過即時監控系統或介接服務所回傳之資料。
  • 使用演算法進行數據分析，並透過Python 3.7實作。如使用k-means ++、ISODATA、SVM等，達到非監督式學習的效果，提供客戶進行決策。
    
• 資料庫規劃與資料庫調校：
  
  • 資料庫規劃：使用MS SQL 2019設計table schema。
  • 資料庫調校：設計自動清除資料之資料庫排程、將與主系統有關之表格與系統log file切割、重建索引，減少資料庫離散。以月為單位，每月調校後的資料庫運行效能與即時監控系統的操作速度提升2倍以上。
• 資料平台介接服務：
  
  • 以ASP.NET MVC Web API框架協助撰寫介接服務，介接來自各個公部門的資料，並自動更新至資料庫。
    

電商平台商品資訊自動化擷取系統

• 使用Python 3.7搭配相關web crawler模組如Requests, Beautiful Soup等撰寫爬蟲程式，使用輕量級Web應用框架Flask，並以Flask-SQLAlchemy存取SQLite。
• 針對回傳資料進行文字探勘，如使用difflib進行關鍵字搜尋的模糊比對、使用jieba進行中文斷詞斷句、使用WordCloud、Word2Vec、SVM等模組解析文字內容，並即時產出互動式圖表。

• Github: Shopee Web Crawler

新北市食安等值域圖應用

• 使用Python 3.7, Plotly.js中的Choropleth Map與D3.js中的Zoom Behavior繪製新北市食品良好衛生規範稽查結果等值域圖。
• 製圖過程牽涉GIS應用，如TopoJSON或GeoJSON的資料轉換、TGOS MAP API及Mapbox API的使用。

• Github: Choropleth Map for GHP in NTPC