文章编号：686 / 更新时间：2023-04-10 / 浏览：次

我的网站显示的蜘蛛抓取，有好多动态链接是否有影响？是否需要处理。该如何处理?

如果不是自己网站本身实际存在的url，很可能是网站由于被人刷，导致的。

对应这些动态链接，可以在robots文件中，写一个屏蔽抓取动态链接的语法。

更详细的robots设置方法，可以看下面链接课程

扫描二维码推送至手机访问。

3浏览自媒体运营与推广

2浏览网站结构优化

2浏览外部链接建设

2浏览自媒体运营与推广

相关标签： Spider、 Robots、

本文地址：https://www.badfl.com/article/4d7137aefe1bedbb7de6.html

上一篇：如何提高spider抓取网站？提高spider抓取策略...
下一篇：如何查看网站被搜索引擎蜘蛛抓取的次数...