將以celery為基礎的分散式架構,運用在多隻網頁爬蟲上,並將其容器化運行於Docker當中,並藉由Docker Swarm將派發爬蟲任務的管理者、爬蟲工人、資料庫分別架設於不同的雲端電腦上,達到職責分離、各司其職，亦方便後續擴展功能以及雲端電腦。