Profile 03 00@2x

黃育瑜 Yu-Yu Huang

Nothing is impossible!

熱愛生活、享受生活
在coding中得到成就感
開發經驗3年,熟悉的語言為Python及Matlab

Python Develop Engineer
Taipei,TW
[email protected]

工作經歷

大數據股份有限公司, Web Crawler Engineer, Oct 2019 ~ 現在

1.網路爬蟲:
(1)使用scrapy框架,實行分散式爬蟲
(2)將資料流送進資料庫(rabbitmq, redis, elasticsearch)
(3)功能之單元測試

2.建立網頁後端api:
(1)使用flask框架,建立新增查詢及檔案下載功能
(2)搭配elasticsearch推出良好的查詢關鍵字排序
(3)可簡略使用script畫出符合需求的統計圖表
(4)使用docker部署server

3.DevOps:
(1)部署cicd(Docker,gitlab)

4.幫助監控、執行的其他專案:
(1)以airflow實行爬蟲單元測試排程
(2)以elk來搜集爬蟲錯誤資訊,並做資料統計

學歷

國立中央大學, 碩士學位, 認知神經科學研究所, 2017 ~ 2019

研究主題為腦機介面
透過獨立成分分析來對腦波信號進行特徵萃取,接著使用滑動窗口來對機械手臂作即時控制

國立中央大學, 理學士(BS), 理學院學士班, 2013 ~ 2017


新竹女子高級中學, 高中文憑, 普通科, 2010 ~ 2013


作品展示

1.爬蟲作品(使用scrapy爬取app的說明及相關評論):https://github.com/hyuyu1544/app-scrapy 

2.crawler with selenium:https://github.com/hyuyu1544/Selenium-Python 

3.建立資料流的consumer端(以docker建立):https://github.com/hyuyu1544/docker-consumer 

4.把自己常用的工具包裝成package:https://github.com/hyuyu1544/yyutils

Powered by CakeResumePowered by CakeResume