基于P2P分布式的网络爬虫设计

基于P2P分布式的网络爬虫设计摘要:未解决传统网络爬虫的在扩展性、容错性和低效性，提出一种基于P2P 的分布式网络爬虫。分布式网络爬虫通过爬虫协调节点提高网络爬虫的爬取数据 的效率和扩展性。本文首先介