PTT網頁爬蟲搭配Flask框架建立查詢系統

Avatar of 馬迪祥.
Avatar of 馬迪祥.

PTT網頁爬蟲搭配Flask框架建立查詢系統

數位技能軟體工程師
New Taipei City, Taiwan
應用Python的PyQuery/Requests套件爬蟲擷取PTT網頁,並將程式碼模組化,分成頁數、日期、定期排程等程式碼,並存入SQlite資料庫,詳Github: https://github.com/DysonMa/PTT-Crawler 。 應用Flask框架將SQlite中的資料render到前端,並製作表格搜尋,搭配flask-pagination製作換頁,以及flask-login製作登入登出頁面,最後應用D3.js將所爬取下來的ptt資料做視覺化呈現。
Avatar of the user.
Please login to comment.

Published: Feb 3rd 2021
404
6
0

D3.js
Flask
SQLite
Python
CSS3
HTML5

Share