陳亞生 Ya-Sheng,Chen

AI大數據時代，掌握資料即掌握市場，熱衷於資料處理、軟體開發的工程師

技能

Python MySQL MongoDB Docker Linux Git VMware

其他使用過軟體、套件 : Airflow、Scrapy、Seleiumn、Pandas、MsSQL

1年 6+個月四月 2022 - Present

負責為各專案提供所需的數據，同時構建相對應的資料處理流程。這涵蓋了多個範疇，包括社交媒體數據、資料庫整合和資訊收集。

快速提供解決方案： 積極與後端工程師合作，以快速響應專案需求，並提供高效的數據解決方案，確保專案按時完成。
Airflow資料整合： 引進Airflow工具，以降低維護技術門檻，同時通過GUI Web介面實現資料整合和爬蟲資料處理流程的監控，提高效率。
豐富數據處理經驗： 參與各種專案，包括輿情分析、情報收集和資料處理流程，累積了豐富的爬蟲和數據處理經驗。這使我能夠提供高效的解決方案，以滿足公司多樣的需求。

2年 6個月十月 2019 - 四月 2022

負責多領域的工作，包括資料蒐集、資料庫管理、資料處理流程設計以及協助開發API資料提取 。

產品研發與0到1開發： 我積極參與與業務、CEO和演算法工程師的討論，共同探討產品研發想法。我參與了從0到1的產品開發過程，包括資料流程的設計和建立。我提供了公司內部操盤建議，開發了Saas平台會員篩選器、精選策略以及金融資產資訊（包括行情和公司財報）所需的資料。
自動化電子發票登錄： 我與母公司的行政財務部門合作，獨立開發了中國電子發票登錄應用程式.EXE。這個應用程式自動化了電子發票登錄流程，節省了大量行政財務作業的人力成本，每年減少了384小時的作業時間。

2019 April - 2019 Sep

2009 Sep- 2014 June

crawler_pytoolkit https://github.com/YashengChen/crawler_pytoolkit
- webdriver 模組、中文個人資料產生器模組、Mailserver SMTP寄件模組、輸出資料模組( 檔案、資料庫 )。