有三种方式： 基于爬虫的搜索引擎（crawler-based engine）（比如Google）是通过动化的软件 代理对网站进行访问、读取和索引。爬虫将所收集到的所有信息都返回到中心服务器。
基于20个网页-相关网页
Crawler-Based Search Engine 机器人搜索引擎 ; 人搜索引擎
crawler-based engine
crawler-based引擎
以上为机器翻译结果，长、整句建议使用 人工翻译 。
Search engine with crawler based on indexes vary in recall and is less precision.
基于索引的爬行程序的搜索引擎检索往往数量众多且准确度较低。
youdao
应用推荐
模块上移
模块下移
不移动