中心节点作为协调器(SpiderCoordinator),计算节点作为多个爬行器(SpiderWorker)。协调器负责对整个系统的部署,管理和维护URL队列。
基于1个网页-相关网页
应用推荐
模块上移
模块下移
不移动