Skip to content

Latest commit

 

History

History
26 lines (14 loc) · 358 Bytes

README.md

File metadata and controls

26 lines (14 loc) · 358 Bytes

nodeSpider

一个nodejs写的爬虫


##功能

  • 从博客园文章列表爬取文章
  • 将爬取的用户信息,文章信息写入mongodb数据库中

##项目中核心库

  • async 控制并发
  • mongoose 建立数据库链接
  • eventproxy 管理回调函数
  • dom解析模块
  • superagent 建立http请求

##使用方法

node start.js