Robots协议跟搜索有关,其实是一个一个搜索引擎的国际默认公约,这样说,大家可能不好理解,下面艾锑无限与大家详细介绍下Robots是什么意思以及Robots协议相关介绍。
一、Robots是什么意思?
Robots是一个英文单词,对英语比较懂的朋友相信都知道(电脑维护),Robots的中文意思是机器人。而我们通常提到的主要是Robots协议,这也是搜索引擎的国际默认公约。
二、Robots协议是什么?
Robots协议通常被称为是爬虫协议、机器人协议,主要是在搜素引擎中会见到,其本质是网站和搜索引擎爬虫的沟通方式,用来指导搜索引擎更好地抓取网站内容,而不是作为搜索引擎之间互相限制和不正当竞争的工具。
百度为什么称360违反Robots协议呢?主要是因为百度认为360搜素对自身产生了竞争(门禁监控),百度不希望自己旗下的贴吧,文库,知道,百科等网站产品,被360搜素收录,并且在Robots协议中标注屏蔽360搜素,而360直接绕过了robots协议继续采集百度旗下产品网站的信息,因此被百度起诉。
简单的说,任何网站只要在其robots协议中加入禁止某搜索引擎访问,那么该搜索引擎就无权收录该网站的内容。而robots的重要性在于,一个网站有权利可以存在于互联网中,但又不被指定的搜索引擎索引放到搜索结果中,因为搜索引擎在互联网上就像国王,网站就是每个人的小家,而robots协议则是对抗国王的最后利器,正所谓“风能进雨能进国王不能进”。
艾锑无限是国内领先IT外包服务商,专业为企业提供IT运维外包、网络布线、电脑维护、网络维护、办公设备维护、服务器维护、数据备份恢复、门禁监控、网站建设等多项IT外包服务。 服务热线:400-650-7820 联系电话:010-62684652 咨询QQ:2488237107 地址:北京海淀区海淀大街38号银科大厦 用心服务每一天,为企业的发展提升更高的效率,创造更大的价值,更多的IT外包信息尽在艾锑无限 http://www.itbmw.com
相关文章