Jl2fwjcl6sr3sbzi4thv

潘揚燊ㄕㄣ   Shen Pan

Kaohsiung City,Taiwan •  

  [email protected]    0909566690

希望職務:人工智慧、機器視覺應用開發工程師        現任 :  聯華電子RPA平台全端開發工程師

您好,我是潘揚燊,目前任職於聯華電子擔任RPA平台全端開發工程師畢業於元智大學工業工程與管理學系研究所。熟悉Python、C#、R語言,能善用人工智慧、深度學習、影像處理、統計分析、數據分析與文字探勘等;也曾使用Flexsim 3D 模擬系統,來建立各種生產流程模型,經由模擬流程找出最佳方案,以最小的成本,獲取最大的效益。

目前在聯電擔任RPA平台全端開發工程師,擁有多年的軟體開發和自動化工程經驗。

負責開發RPA流程機器人於各製程機台介面的影像辨識功能,並進行專案管理和維運管理工作。我擅長新技術導入,並具有豐富的系統設計和功能規劃經驗。在之前的職位上,我也積極參與了客戶端軟體開發服務以及廠內自動化軟硬體開發工作,並成功導入了AI技術以提升生產效率。 

20193月至7月期間,加入朋友團隊-智合科技公司,共同參與由經濟部工業局國際大廠 NVIDIA 舉辦的嵌入式新創開發競賽,最終獲得最佳應用創新獎。

我期待能夠在貴公司繼續發揮我的專業技能,並貢獻於團隊的成長和發展,一同追求卓越的成就。期待有機會進一步討論我的經驗和如何能夠為貴公司帶來價值。 謝謝您撥冗閱讀我的自我介紹,期待能有機會與您進一步交流。

Work Experience

聯華電子RPA平台全端開發工程師,Jul.2022- Now

  • 開發功能:負責RPA流程機器人於各製程機台介面之影像辨識功能: 
    OCR
    元件、客製化機台影像辨識元件開發、瑕疵檢測模型開發、影像分割模型開放、影像定位演算法開發。
  • 開發功能專案管理:系統設計與功能規劃,與外包共同完成系統優化與功能開發。
  • UMC 12X 廠內RPA專案執行:與使用者共同開發專案,支援RPA 功能與各系統串接。
  • 維運管理:負責 UMC  12X 聯芯 RPA 平台 系統維運與需求評估。
  • 新技術導入:影像辨識相關新技術導入、LLM 客製化AI Agent 串接

緯創軟體開發工程師Nov.2021 - Jul.2022

提供客戶端聯華電子軟體開發服務,主要負責RPA流程機器人於各製程機台介面之影像辨識功能。

華泰電子自動化工程師Aug.2019 -Nov.2021 

  • 開發廠內自動化機台:自動化機台。 
  • 開發廠內自動化軟體 : 量測數值數位化、品質數位化(虛擬量測)。 
  • 開發光學量測、瑕疵檢測機台:AOI、AI-AOI。
  • AI導入:工時量測、設備壽命優化(PHM)、工廠智慧化。

中國砂輪企業股份有限公司工業工程師Jan.2018 -Mar.2019 

  • 產線升級所需軟硬體並協助撰寫,將其導入產線自動化。
  • 產品瑕疵偵測演算法開發,數據清理,影像前處理,AI建模,協助AOI機台做二次判斷
  • 規劃生產設備操作流程編寫作業指導書,降低製造成本,使人員正確使用機器及降低故障率。
  • 生產設備數據分析,製程問題進行分析,檢視錯誤原因,如: 負擔過重、溫度過高等。

Skills


Python

  • Langchain
  • Numpy 
  • OpenCV 
  • Tensorflow (tf.keras)
  • Pytorch 
  • Scikit-learn


C#

  • EmguCV
  • ASP.NET 
  • Windows Forms 程式設計開發、單元測試專案

Halcon

  • 影像處理
  • 影像定位
  • 瑕疵判斷
  • 物件量測


Skills


Database

  • MySQL
  • Oracle
  • ArangoDB


LLM

  • Tool:langchain
  • Vector DB:Milvus
  • API:AzureOpenai API、FastAPI

MessageBus

  • RabbitMQ
  • TibcoRV

Skills


R language

  • 數據分析
  • 文字探勘
  • 統計分析


Embedded System

  • Raspberry pi 
  • Arduino
  • NVIDIA Jetson AGX Xavier

IDE

  • Git:版本管理、維護
  • Visual studio:.NET Windows Forms 開發
  • Pychram:python 專案開發
  • RStudio:R語言開發

UMC Project 1-
WAT TEL 自動對針

WAT機台每月大約有200Prober異常。Prober異常每次處理時間約4 mins,Prober異常可能同時發生在不同機台,透過RPA平台與開發影像辨識元件,自動操作機台,使用影像辨識技術:OCR、清晰度計算、針點辨識,達到自動對焦、對針,最終上線29台,成功率 85% up,生產力提高1%  

【實作方式】 基於C#程式語言的Windows applications串接廠內EAP系統,達到自動化執行RPA腳本,透過開發影像辨識元件,進行確認影像清晰度,配合KVM控制遠端機台操作,將機台影像畫面逐步調整清晰化,後使用Blob Detection,進行針點辨識。

【使用技術】 影像辨識、MessageBus、ArangoDB、ElasticSearch

Paragraph image 04 00@2x
Paragraph image 04 01@2x

UMC Project 2-

WAT TEL 針痕檢測

WAT機台針痕檢測過去由大量人工檢查,透過導入RPA平台與開發影像辨識元件,使用影像辨識技術、影像分割技術,達到自動針痕檢測最終上線29台,成功率 98% up,生產力提高1%

【實作方式】 基於C#程式語言的Windows applications串接EAP系統,達到自動化執行RPA腳本,透過開發影像辨識與OCR元件,進行Blob Detection與影像轉文字,並在後端搭建FastAPI 串接SAM進行影像分割,配合KVM控制遠端機台操作。

【使用技術】 影像辨識、MessageBus、深度學習影像分割、FastAPI、ArangoDB、ElasticSearch

Paragraph image 04 00@2x
Paragraph image 04 01@2x

SAM 影像分割

在傳統機器視覺作法,我們必須參照沒有針痕的影像進行相減,但在實際產品中, 會遇到PAD上都帶有針痕的情形、或是多類型針痕在此作法失效的問題 因此,透過語意分割模型Segment Anything Model (SAM)來解決我們的困境,並提升檢測的成功率到98%

UMC Project 3-

KLA 2835 

Retrain Recipe

KLA 2835機台過去在發生異常時,需要DM 工程師重新建立程式,透過導入RPA平台與開發影像辨識元件,使用影像辨識技術,達到自動建立程式最終上線5台,成功率80% up,生產力提高1%

【實作方式】基於C#程式語言的Windows applications串接EAP系統,達到自動化執行RPA腳本,透過開發影像辨識模板匹配元件,可進行影像定位配合KVM控制遠端機台操作。【使用技術】影像辨識、MessageBus

Paragraph image 04 00@2x
Paragraph image 04 01@2x

OSE Project 1-
AI輔助AOI人工複判

AOI機台判定Fail零件交由人員複判,因人員複判太多會有缺失,

透過AI判斷取代複判人員增加產能利用率導入期間能檢測10多種電子零件瑕疵,並降低AOI工程調機時間,提升稼動率使機台直通率上升14%。

【實作方式】 基於C#程式語言的Windows applications使用Tensorflow、
Emgucv
進行影像分類與檢測; 基於python語言使用監督式方式訓練模型,並開發訓練模型api達到系統自動學習功能,透過資料擴增處理資料不平衡。

使用技術】深度學習影像分類、影像辨識、 多執行緒、行為監控 。

Paragraph image 04 00@2x
Paragraph image 04 01@2x
Paragraph image 03 00@2x

OSE Project 2-
自動化 IC 分料

自動化分料專案取代人員分料,節省人力並縮短分料時間,減少人員因重複性作業作業疲勞造成的錯誤,並能自動計算需分料顆數取代人員計數。

視覺辨識、光學定位校正, 確保分料品質、機台穩定性分料,以每批時間計算,透過自動化分料可替代原分料人力並縮短分料時間約795秒/批,透過自製節省外購成本: $334,590。

【實作方式】 基於C#程式語言的Windows applications,使用EmguCV進行影像處理與IC中心定位,透過I/O控制組控制汽缸上下與吸嘴正負壓、RS232控制伺服馬達達到吸取放置等功能。

【使用技術】影像處理、IO控制、馬達軸動控制

OSE Project 3-智慧化收集工時取代人員測量

以往IE遇到報價或是工程改善時,經常使用碼錶與表格,來測量工時;透過系統架設與人工智慧的導入,取代過去方式,降低工程人力成本,並自動化寄送wip報表、工時報表,供工程人員使用。

【實作方式】 

基於pythonQT 程式語言的用戶界面程式,以Socket架設Message 交互 端,透過網路傳輸影像與文字,使用OpenCV進行影像處理、並在Tensorflow框架搭建YOLOv3模型進行物件辨識,以Realtime方式偵測人員是否在工作站工作,並記錄工時,並在每日發送報表與相關人員

【使用技術】Socket 、影像處理、深度學習物件辨識、資料分析

Paragraph image 04 00@2x
Paragraph image 04 01@2x

OSE Project 4-

自動檢測LED狀態

因客訴一片板子短路,重工期間須多花費總工時約40小時。 測試期間只有使用客戶治具進行測試,無log 記錄,以人員操作時增加自動化光學檢測機台輔助測試.避免人員作業疏失。

【實作方式】基於 python QT 程式語言的用戶界面的程式, 使用Opencv進行影像處理,以 Real time 方 式依據流程檢測該項目是否亮燈。 

【使用技術】 影像處理(濾波、色彩空間轉換、二值化、 Mask

Paragraph image 02 00@2x

OSE Project 5- 

智慧化料捲計數

目前產線在分料時由於作業員為了提升效率違反標準作業 流程,透過物件偵測判斷作業員是否違反SOP,並以通訊軟體及時通知該主管。

【實作方式】

基於python的監控程式,已架設Webcam並使用Tensorflow架構搭建MobileNet 物件辨識模型,Realtime偵測作業員是否違反SOP

【使用技術】深度學習物件辨識、AIIOT

Paragraph image 04 00@2x
Paragraph image 04 01@2x

Kinik Project -成品外觀瑕疵檢測

Projects 01 00@2x

系統自動判斷製程中所造成的瑕疵,透過機器視覺結合人工智慧,改善人工目視所造成的人工成本。

【實作方式】基於 python QT 程式語言的用戶界面的程式, 使用 Opencv 進行影像處理, Tensorflow 進行影像分類、以 Real time 方 式依據流程檢測該半成品是否有瑕疵。 【使用技術】 影像處理(濾波、色彩空間轉換、二值化、 Mask) 、 深度學習影像分類

Full-stack Research 

AI輔助AOI人工複判、AI-AOI檢測技術,透過配合廠商加上國內資深教授的技術教導,在現有的瑕疵檢測機台上導入深度學習輔助,降低複判人員的人工成本,並增加現有機台的直通率。

                           研究動機                                   
                     選擇適當影像分類模型
                      模型學習曲線評估
                      訓練後模型評估
                      非監督式學習檢測
                        開發產線應用軟體
                          導入技術數據評估

Full-stack Development

AI-AOI檢測技術,透過配合廠商加上國內資深教授的技術教導,開發新技術瑕疵檢測機台透過深度學習輔助,降低傳統影像辨識算法過篩濾,並降低目檢人員的使用率。

                           模型訓練流程
                        開發AI訓練軟體

                    瑕疵辨識分割前景背景
                        瑕疵物件辨識

NVIDIA&HackIDB 

嵌入式新創開發競賽

於2019年3月至7月期間,加入朋友團隊-智合科技,共同參與由經濟部工業局攜手國際大廠 NVIDIA發起為推廣「人工智慧」創新技術培育,推動智慧化的各式創新應用的 HackIDB 競賽。 

在比賽過程中擔任AI演算法與模型開發者,並透過PyQt撰寫GUI結合NVIDIA ® JETSON AGX Xavier ™ 開發套件成功運用人工智慧的方式自動進行二次判斷現階段透過 AOI 瑕疵檢測產出圖片,以取代人工判讀,最終獲得最佳應用創新獎。

Paragraph image 02 00@2x
Paragraph image 06 00@2x
Paragraph image 06 01@2x
Paragraph image 06 02@2x

Certificate

對於學習經驗相當重視的我,在學生時期積極地考取有興趣的證照,例如:

  • 生管CIIE(Chinese Institute of Industrial Engineers)中國工業工程學會證照
  • 品管CIIE中國工業工程學會證照
  • 基礎採購檢定
  • 較為特別是圖4 EPC global認證 是有關RFID(Radio Frequency IDentification)無線射頻識別系統的專業證照
  • EMT(Emergency Medical Technician)緊急醫療技術員證照

Paragraph image 04 00@2x 0a60eca693a10c928b852fbc59ecb80f69e59f0d26acd4c74f39c7f256369567
Paragraph image 04 01@2x d7b528f9ab8e34777562695011fbbc2a4f3f28d8b47f4c8e57ee7c3410afdfa8
                                                                                                         圖一:CIIE 生管技術師證照                                       圖二:CIIE 品管技術師證照

Paragraph image 06 00@2x 87e77cbcc732097bbd3c1ea0cc62ddde26e5adb1eceee8497e66e58206763cfd
Paragraph image 06 01@2x 13ec779ca27733557a5d2830d84049bfdfc54edd6ade36ee5766eea97298cf4a
Paragraph image 06 02@2x 3081b368fb6b38d988063c1300041f0c2b0cb92aae2fac6f55abc21c8e235124
                           圖三:基礎採購檢定證照                                                                           圖四:RFID證照                                                                            圖五:OFFICE國際證照

Paragraph image 06 00@2x 87e77cbcc732097bbd3c1ea0cc62ddde26e5adb1eceee8497e66e58206763cfd
Paragraph image 06 01@2x 13ec779ca27733557a5d2830d84049bfdfc54edd6ade36ee5766eea97298cf4a
Paragraph image 06 02@2x 3081b368fb6b38d988063c1300041f0c2b0cb92aae2fac6f55abc21c8e235124
             圖六:工業工程碩士畢業證書                                           圖四:ANQ 亞洲品質會議 參與證書                                                            圖五:緊急醫療技術員證照

Extracurricular Activities 

UMC Spot Award2022 Q4 

2022 Q4-Spot Award,WAT TEL 自動對針 & 針痕檢測 

Experiences 00 00@2x 504900dc09d82f711fdb54cf5763251cab5193a844856da978b2b8f3907ecd5a

華泰電子工程競賽, 2020-2021

2020年-金質獎,報告題目:智慧化收集工時取代人員測量

2021年-銀質獎,報告題目:自動化 IC 分料
Experiences 00 00@2x 504900dc09d82f711fdb54cf5763251cab5193a844856da978b2b8f3907ecd5a

參與Nvidia&HackIDB  嵌入式新創開發競賽, Jul.2019

Nvidia & HackIDB 嵌入式新創開發競賽  最佳應用創新獎

Experiences 00 00@2x 504900dc09d82f711fdb54cf5763251cab5193a844856da978b2b8f3907ecd5a

花蓮縣消防局 選手, May.2017

2017 世紀飛天龍-鯉魚展競技龍舟錦標賽競賽  亞軍

Experiences 00 00@2x 504900dc09d82f711fdb54cf5763251cab5193a844856da978b2b8f3907ecd5a

Sir格鬥學院 選手,Jun.2016
2016 年桃園市運動會搏擊錦標賽 第三名

Experiences 00 00@2x 504900dc09d82f711fdb54cf5763251cab5193a844856da978b2b8f3907ecd5a

亞洲品質網路國際會議  工作人員Sep.2015
亞洲品質會議(Asian Network for Quality (ANQ) Congress),共有30個論文發表場次,共發表170餘篇論文,與會人士來自台灣、日本、印度、韓國、越南、泰國、大陸、香港、俄國、哈薩克、尼泊爾、新加坡及紐西蘭等地參與此次活動協助論文發表與協助場次主持人處理各項事務,並協助講者上傳投影片。


Experiences 00 00@2x 504900dc09d82f711fdb54cf5763251cab5193a844856da978b2b8f3907ecd5a

元智大學 多媒體電子音樂社 社長Sep.2013 - Sep. 2014

擔任社長期間活動企劃部分列出:

  • 2013/10 桃園有愛擁抱希望 路得夢想號交通車勸募計畫 表演 
  • 2013/12 元智聖誕音樂會 主辦 
  • 2014/05 飢餓30在元智 表演 
  • 2014/05 無限花序 八社音樂會 主辦 

Experiences 00 01@2x 6daa47d1df70d315f129dcecdd562003831581c4cdd8f9c819aa22d4a24ae150

元智大學 工管系排球隊 輔舉,Sep.2011-Sep.2015

  • 2013年 桃園區商管盃 元智工管-亞軍 
  • 2014年 桃園區商管盃 元智工管-冠軍 
  • 2015年 全國大專院校大學工業工程盃 元智工管-冠軍

Experiences 00 02@2x d08cb731546334ac3e784c5845e368719bba256a127be86e720a634d798b8bb9

元智大學工管系迎新  隊輔Sep.2012

在大學期間擔任帶營隊的隊輔,幫助新生學弟妹互相認識,透過團康活動,可以更認識自我更可以學習到,在逆境中也要帶領團隊繼續前進的堅定力。

Experiences 00 03@2x b381b81be12ffb5207e31257bd24e9606aef09c63c7e710fcd513da5ffd4e913

附錄1 -運用文字探勘分析特定領域語詞組成-以台鐵郵輪列車為例(研究論文)

由於口譯者往往只是學習過像是英文、日文等等語言,但對於特殊領域的字詞,在各領域的翻譯可能不太一樣,因此想透過的探勘手法,透過特殊領域的文件輸入,可以快速地找出關鍵字,並且將關鍵字主題化,對於一般口譯者來說,可以快速地找到各領域的重要詞彙,針對翻譯做出更正,瞭解這領域的口譯者,可以快速地將關鍵字做分群,進而整理文件,對於口譯者在做資訊交流時有莫大的幫助。 在工業工程方面,也可以運用其架構,立即的找出生產序列當中的重要文件

Paragraph image 04 01@2x d7b528f9ab8e34777562695011fbbc2a4f3f28d8b47f4c8e57ee7c3410afdfa8
Paragraph image 06 00@2x 87e77cbcc732097bbd3c1ea0cc62ddde26e5adb1eceee8497e66e58206763cfd
Paragraph image 04 00@2x 0a60eca693a10c928b852fbc59ecb80f69e59f0d26acd4c74f39c7f256369567
Paragraph image 06 02@2x 3081b368fb6b38d988063c1300041f0c2b0cb92aae2fac6f55abc21c8e235124

附錄 2-系統佈置設計SLP(大學研究)

右圖為產品生產流程圖,產品搬運時流程路徑還有可改善的地方,我們希望藉由系統佈置設計(systematic layout planning,SLP)來改善其部門間的相對位置,讓生產流程更為順暢。在最佳化佈置中去探討,利用演算法的工廠佈置與軟體上的最佳化佈置分析比較,最終將每單位產品原始成本將低了約25%

Paragraph image 04 00@2x 0a60eca693a10c928b852fbc59ecb80f69e59f0d26acd4c74f39c7f256369567
Paragraph image 04 01@2x d7b528f9ab8e34777562695011fbbc2a4f3f28d8b47f4c8e57ee7c3410afdfa8
Paragraph image 06 00@2x 87e77cbcc732097bbd3c1ea0cc62ddde26e5adb1eceee8497e66e58206763cfd
Paragraph image 06 01@2x 13ec779ca27733557a5d2830d84049bfdfc54edd6ade36ee5766eea97298cf4a
Paragraph image 06 02@2x 3081b368fb6b38d988063c1300041f0c2b0cb92aae2fac6f55abc21c8e235124

Hobbies

音樂使我保持一定的專注性,更重要的是音樂使人類生活更佳美好!

If I were not a physicist, I would probably be a musician. I often think in music. I live my daydreams in music. I see my life in terms of music. - Albert Einstein
( theoretical physicist)

Paragraph image 00 00@2x ebb59a6d9adb03673d06762584bb6a0cc401a7cc4bd081bb82ce6f841d95aa2b

攝影如瞳孔,將台灣最美的地方用自己的角度所記錄下來
Beauty is everywhere. It is not that she is lacking to our eye, but our eyes which fail to perceive her. - Auguste Rodin (sculptor.)

Paragraph image 04 00@2x 0a60eca693a10c928b852fbc59ecb80f69e59f0d26acd4c74f39c7f256369567
Paragraph image 04 01@2x d7b528f9ab8e34777562695011fbbc2a4f3f28d8b47f4c8e57ee7c3410afdfa8

泰拳是泰國的傳統搏擊技術,在練習泰拳中除了強身健體,當遇到緊急狀況時更可以保護自己,是一項可以抒發壓力的運動。

爬山使我更加堅強,在雄偉的山面前感受人類的渺小,卻也感受到了身為人類的堅韌。

If they can make penicillin out of moldy bread, they can sure make something out of you. - Muhammad Ali (professional boxer)

Paragraph image 04 00@2x 0a60eca693a10c928b852fbc59ecb80f69e59f0d26acd4c74f39c7f256369567
Paragraph image 04 01@2x d7b528f9ab8e34777562695011fbbc2a4f3f28d8b47f4c8e57ee7c3410afdfa8