施雨亨 Rain Shih

至今於旗標科技擔任工程師, 主要為資訊電子 (Maker) 教育產品開發, 從發想、提案、教學實驗設計、硬體開發至書籍編寫, 可獨立作業亦可團隊合作, 產品主題囊括自駕車、機器視覺、機器學習、單晶片應用、資訊安全等。

也曾參與大型互動裝置開發：中華職棒 2015 總冠軍賽實況環景陣列攝影系統、新光三越新天地小西門綺影光廊光雕投影互動。

職場生涯最初於壹傳媒動畫任職逾五年 3D 動畫師, 由於製作新聞動畫時程相當緊迫, 工作常需要一些小工具程式增進動畫工作效率, 進而學習 Python 程式語言, 爾後便跨足互動軟硬體設計。

熱於分享知識與技能, 功夫不藏步, 同時也是興趣廣泛的 Maker：水電裝修 / 室內裝潢 / 木作 / 雷射切割雕刻 / 3D 建模 / 3D printing

最享受解決問題後的快感, 舉凡家中各種硬體問題, 大至全屋裝潢設計、水電裝配, 小至窗簾縫紉衣物修補, 皆有涉獵。

New Taipei, Taiwan

makers.tw _{(under construction)}

工作經歷

Jun 2016 — Present ． 5 yrs 1 mos

工程師

旗標科技股份有限公司

主要業務為產品開發, 發想、提案、教學實驗試做、評估產品成本、洽尋零件供應商、圖書編輯、驗收零件品質。

次要為針對客戶業務方面需求不定時舉辦教育訓練, 必須擔任講師或助教。

Feb 2011 – Apr 2016 ． 5 yrs 3 mos

Mocap 動畫師

壹傳媒動畫有限公司

前期為 3D 動畫新聞製作, 負責將真人演員的演出, 透過動態捕捉得到的動態資料同步至虛擬 3D 角色, 再根據劇本需求優化調整角色動態表演, 同時也需要指導演員演出以符合劇情。

後期業務則轉為偏向較要求精細品質的專案式工作, 而非要求時效性的新聞動畫, 動態捕捉則轉為輔, 主要為需要較多心思調整的動畫製作及動作調整。

專案

新光三越綺影光廊光雕投影互動 <作品相關連結>

為期兩年的展出, 一共 8 次內容更新。長約 13 米的百貨公司連通道, 使用 16 台投影機將畫面拼接而成, 當使用者經過地板時, 畫面便會產生互動, 連通道底部牆面則是根據使用者手部位置進行追蹤而產生互動。

硬體設備整合
網路通訊規劃與整合
Unity 場景整合、特效、程式設計

#Unity #C# #Realsense #Kinect #LattePanda

Challenge :

在長度約 13 米的通道中, 為實現追蹤多個使用者的位置進而產生互動, 在硬體與技術上選擇了從走廊上方往下安裝了多台深度攝影機, 搭配使用 K-means 演算法得到拍攝到人體圖像的位置, 同時也可以濾除雜訊, 最後再以區域網路通訊傳至主要執行互動 App 的主機, 在相對應的虛擬座標位置產生互動。

AI 自駕車 F-Drive <產品連結>

該專案主要負責為軟硬體整合、硬體控制、外觀與結構設計：

整合單板電腦與單晶片控制板
單晶片控制板馬達控制韌體編寫
電路設計與測試
外殼與結構設計

#Python #C++ #Arduino

Challenge :

以該教具產品的市場規模而言, 基本上無法負擔客製化硬體生產, 所以設計上首要考量即是成本問題, 必須尋找符合功能需求、品質管控同時還要兼顧成本, 無法以像是個人研究目的為出發點來構成, 最終解決方案則是選用市售金屬小車底盤, 再自行設計車體結構後, 委託 3D 列印工廠進行量產。

環景陣列攝影系統

使用單晶片控制數十台相機快門拍攝後, 利用程式將檔案處理, 再觸發影像後製軟體將序列照片套用校正資訊後算圖成影片, 180度連續攝影突破傳統視角, 而一連串自動化控制以因應體育活動實況轉播的即時性, 更可根據不同的延遲程式來達到不同視覺效果, 應用不同活動場合, 另搭配觸控面板可使用於私人活動。

單晶片控制系統程式設計、結構及電路設計
檔案自動處理程式設計
使用者 UI 操作設計

#C++ #Python #Processing #3D Printing #After Effect

Challenge :

設計初期遇到了相當致命的問題, 即是每台相機快門觸發延遲的落差太大, 導致影片無法滿足幾毫秒之時間差拍攝, 本來以為是控制板控制電晶體過程產生延遲, 更換光耦合元件後仍無法順利解決, 最終才發現原來是單眼相機反光鏡機構造成大量延遲, 所幸一般單眼相機已內建『反光鏡預升』功能, 只要在拍攝之前將所有相機反光鏡升起, 就能確保觸發間隔可以控制在幾毫秒之時間差。

教育產品開發

AI 機器視覺 - 運用邊緣運算實作影像分類與物件追蹤

(控制板晶片短缺, 延遲上市)

套件使用邊緣運算開發板 K210 晶片來實作, 可以讓讀者在學習機器視覺過程得到更實際應用面上的體驗, 除了基本影像處理外, 主軸為知名的 YOLO 物件偵測系統實作與解說, 最後用尋找實體圖片中的虛擬人物, 並控制馬達與雷射指出結果作為實驗。

Challenge :

對於要實作 AI 的學習者而言, 在網路上就可以搜集到大量的教學資源, 但千篇一律可能都是大同小異的 LAB, 依樣畫葫蘆做完之後可能還是相當茫然, 缺乏實作的投入感, 因此在設計這個產品的時候, 參考了知名的遊戲『威利在哪裡？』來設計, 遊戲即是在相當複雜且重複的圖像中, 找出主角威利的蹤影, 這剛好相當適合作為 CNN 以及 Object Detection 的實驗, 另外訓練模型往往需要效能較高的設備, 但由於 Colaboratory (colab) 服務普及, 實驗中訓練模型則可以利用 Colab 進行, 同時為了讓讀者了解邊緣運算的原理, 選用了可以運作預測行為的控制板, 也可以依照預測結果控制各式硬體周邊, 最重要的是控制板還能夠符合成本預算。

影像辨識聲控 AI 自駕車

從建立自己的資料集、訓練影像模型、辨識道路與辨識路牌, 搭配 APP 開發與自己組裝的車體, 打造自己的自駕車。

Challenge :

實作 AI 對於初學者來說, 架設環境是相當困難的環節, 對於自己不熟悉的語言往往更是只知其然, 不知其所以然, 為此在設計上選擇了易上手且知名的 App Inventor 實作 App 設計與影像辨識, 讓使用者可以屏除艱深難以入門的環境架設, 更能直接體驗 AI 的概念來學習。

資安衛士破解駭客戲法

使用雙開發板、雙程式語言讓讀者在重現各式駭客常見手法中, 認識如何防範資安漏洞與風險, 如 Bad USB、Wi-Fi Deauth、Keylogger或公共釣魚網站等等。

Challenge :

這產品強調的方向是希望讀者可以知道一些駭客的手法, 進而知道如何防範未然, 但也有可能不小心造成犯罪行為產生, 為此手冊上每個實驗皆加上相關法條以及警語, 確保使用者不會因為實驗而不小心觸法。

技能

Programming

Python
C++
Solidity

Embedded System

Arduino
Raspberry pi
ESP series

RISC-V, ARM

Industrial Design

Pro/E (creo)
DLP, FDM Rapid prototyping
Illustrator
Photoshop

Media Design

Unity
3DS MAX
Premiere
After effect

學歷

銘傳大學

數位多媒體設計系

2005 - 2009

施雨亨 Rain Shih

工作經歷