nodeCrawler快樂爬蟲人

Avatar of 戴靖.
Avatar of 戴靖.

nodeCrawler快樂爬蟲人

Taipei City, Taiwan
專案地址:https://github.com/asdfghjkl123620/nodeHappyCrawler 專案名:nodeHappyCrawler web crawler for every web:這裡是爬蟲的快樂世界 詳細資訊: * 目前使用套件:nightmare,jquery,jsdom,moment * 未來即將使用套件: d3.js or chart.js * 介紹:每天生活資訊太多,不想copypaste嗎?XD這裡可以輕鬆地爬取靜態網頁的內容, 使用nightmare進行網頁行為模擬,在當中搭配使用 async await進行抓取,並且也有使用curl進行其他的爬取 之後本專案會將這些抓取下來的資料進一步使用chart.js或是d3.js以分布圖呈現 接下來可能會朝更強大的工具selenium邁進喲!!呵呵
Avatar of the user.
Please login to comment.

Published: Mar 7th 2020
146
4
0

CURL
Crawling
Node.js

Share