如何防止蜘蛛天天爬网站

crx349 · 发表于 2024-7-27 17:13:55

人民群众发表于 2024-7-27 16:55
是根据板块关闭还是全局站点呢？

游客访问权限改成 0 就自动屏蔽蜘蛛了

ksy · 发表于 2024-7-29 07:52:17

人民群众发表于 2024-7-26 18:13
用的是bt环境面板

宝塔被挖出来过有后门，夜间偷偷传输数据，建议转1panel

ksy · 发表于 2024-7-29 07:53:28

可以试试改Robots.txt

油管 · 发表于 2024-7-29 09:58:23

ksy 发表于 2024-7-29 07:52
宝塔被挖出来过有后门，夜间偷偷传输数据，建议转1panel

不要脸的营销

人民群众 · 发表于 2024-8-3 14:08:37

游客改成0不行啊，还是一样有蜘蛛请求。

港城君 · 发表于 2024-8-3 17:18:19

蜘蛛天天爬网站

------------------------

是指国外IP在论坛注册新会员的意思吗？

470342341 · 发表于 2024-8-4 20:48:04

人民群众发表于 2024-7-27 17:02
ip规则没有用的，经常换。

拦截 ip 拦截 UA 找找规律可以拦截的当然前提是蜘蛛，如果是恶意攻击扫描随机访问页面随机 UA ip 也是海量就没有办法了。只能开 cc了网站备案的话上个免费的国内 cdn 防护下或者收费的没备案的话用 cf吧不过国内访问速度回慢些

IsaacZ · 发表于 2024-8-6 23:43:19

我只知道百度蜘蛛，可以去站点管理_站长工具_百度搜索资源平台调整抓取频次上限：

截图202408062341107849.jpg

IsaacZ · 发表于 2024-8-7 00:16:13

我以为蜘蛛爬网是好事。

天外飘仙 · 发表于 2024-8-7 09:19:12

IsaacZ 发表于 2024-8-7 00:16
我以为蜘蛛爬网是好事。

真蜘蛛是好事！假蜘蛛就是攻击了

[求助] 如何防止蜘蛛天天爬网站