...(BBS、数据库多数采用这种编写方式),搜索机器人就会停止抓取网页,因为这是为了避免一种叫「搜索机器人陷阱(spider traps)的脚本错误(这种错误会让搜索机器人进行无限循环的抓取,无法退出而浪费大量时间)。
基于194个网页-相关网页
... cross spider 交叉线 spider traps 搜索机器人陷阱 ; 蜘蛛陷阱 ; 蜘蛛程序陷阱 ; 心形成一种蜘蛛圈套 Spider Riders 蜘蛛骑士 ; 蛛蛛骑士 ...
基于24个网页-相关网页
这是为了制止一种叫“搜索机器人机关(spider traps)”的脚本毛病. .
基于8个网页-相关网页