0
0
青灯夜游
发布时间：2019-05-24 13:33:04
|16542人浏览过
|来源于php中文网
原创
搜索引擎蜘蛛是指：网络爬虫。网络爬虫是一种按照一定的规则，自动地抓取万维网信息的程序或者脚本。每个搜索引擎都有自己的蜘蛛，搜索引擎蜘蛛也叫搜索引擎爬虫、搜索引擎robot。
什么是搜索引擎蜘蛛？
搜索引擎蜘蛛简称网络爬虫(webcrawler)，网络爬虫(又被称为网页蜘蛛，网络机器人，在FOAF社区中间，更经常的称为网页追逐者)，是一种按照一定的规则，自动地抓取万维网信息的程序或者脚本。
我们可以将互联网理解成一张巨大的“蜘蛛网”，而搜索引擎蜘蛛是类似实质的“机器人”。蜘蛛的主要任务就是在巨大的蜘蛛网（互联网）中浏览信息，然后把这些信息都抓取到搜索引擎的服务器上，然后建立索引库。就好比机器人浏览我们的网站，然后把内容保存到自己的电脑上。
每个搜索引擎都有自己的蜘蛛，搜索引擎蜘蛛也叫搜索引擎爬虫、搜索引擎robot。
国内各大搜索引擎蜘蛛名称：
百度：百度spider
谷歌：googlebot
搜狗：sogou spider
搜搜：Sosospider
360搜索：360Spider
有道：YodaoBot
雅虎：Yahoo Slurp
必应：msnbot
Msn:msnbot
相关文章
相关标签:
本站声明：本文内容由网友自发贡献，版权归原作者所有，本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容，请联系admin@php.cn
热门AI工具
相关专题
搜索引擎是一种互联网工具，用于帮助用户在网上查找信息。搜索引擎的目标是提供最准确、最有价值的搜索结果，使用户能够快速找到所需的信息。本专题为大家提供搜索引擎相关的各种文章、以及下载和课程。
359
2023.08.02
搜索引擎营销的主要模式包括：1. 竞价排名（ppc）；2. 搜索引擎优化（seo）；3. 本地搜索营销；4. 购物广告；5. 视频广告；6. 展示广告；7. 社交媒体营销；8. 移动广告。想了解更多搜索引擎营销的相关内容，可以阅读本专题下面的文章。
427
2024.05.20
本专题系统讲解 Java 在桌面应用开发领域的实战应用，重点围绕 JavaFX 框架，涵盖界面布局、控件使用、事件处理、FXML、样式美化（CSS）、多线程与UI响应优化，以及桌面应用的打包与发布。通过完整示例项目，帮助学习者掌握 使用 Java 构建现代化、跨平台桌面应用程序的核心能力。
36
2026.01.14
热门下载
相关下载
精品课程
共18课时 | 5.3万人学习
共3课时 | 2.1万人学习
Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号
