有没有方法不让搜查引擎收录 (有没有方法不运动就可以减肥的呢)

文章编号：9802 / 分类：SEO教程 / 更新时间：2024-06-26 17:48:31 / 浏览：次
有没有不运动就可以减肥的呢

一、对于robots文件1. 搜查引擎蜘蛛访问网站时,会先检查网站根目录下有没有文件,该文件用于指令搜查引擎制止抓取网站某些内容或准许抓取某些内容。

留意:就算准许抓取一切内容,也要建一个空的文件放在根目录下。

2. 只要在须要制止抓取某些内容时,才无心义,假设该文件为空,就象征着准许搜查引擎抓取一切内容。

3. 语法解释: 最便捷的robots文件:制止搜一切搜查引擎抓取任何内容,写法为: User-agent:* Disallow:/其中,User-agent用于指定规定实用于哪个蜘蛛。

通配符*代表一切搜查引擎。

如只实用于网络蜘蛛,则写为:User-agent:baiduspider。

谷歌蜘蛛:Googlebot. Disallow通知蜘蛛不要抓取某些文件。

如 Disallow:/post/,通知蜘蛛制止抓取Post文件夹下文件。

Disallow后什么都不写,代表准许抓取一切页面。

二、对于meta robots标签 1. 用于指令搜查引擎制止索引本页内容。

2. 语法解释: 意思是制止一切搜查引擎索引本页面,制止跟踪本页面上的链接。

noindex:通知蜘蛛不要索引本页面。

nofollow:通知蜘蛛不要跟踪本页面上的链接。

nosnippet:通知蜘蛛怒要在搜查结果中显示说明文字。

noarchive:通知搜查引擎不要显示快照。

noodp:通知搜查引擎不要经常使用开明目录中的题目和说明。