页面重载开启怎么避免影响百度蜘蛛

顽童不老 · 发表于 2024-3-27 12:14:26

月亮水发表于 2024-3-27 09:39
好像没什么用

有用的。

顽童不老 · 发表于 2024-3-27 12:16:24

月亮水发表于 2024-3-27 09:40

蜘蛛抓取需要过几天看看效果。

月亮水 · 发表于 2024-3-27 15:02:19

顽童不老发表于 2024-3-27 12:16
蜘蛛抓取需要过几天看看效果。

设为4，CPU降了是很明显示的，主要蜘蛛不知道有没有影响

顽童不老 · 发表于 2024-3-30 21:02:22

月亮水发表于 2024-3-27 15:02
设为4，CPU降了是很明显示的，主要蜘蛛不知道有没有影响

经过一周时间的观察，好像这段代码没有用处。

顽童不老 · 发表于 2024-3-30 21:06:06

刚才搜了一下这个版块下面的主题，最近几天的帖子百度好像也没有收录，不知道是不是论坛的内容百度现在不收录了。

顽童不老 · 发表于 2024-3-30 21:18:05

搜了一下度娘，有人说是防采集功能影响了收录，今天把防采集关闭了，再观察几天看看。也许这段代码没有问题。还是要谢谢代码提供者。

[已解决] 页面重载开启怎么避免影响百度蜘蛛