求助，关于百度云加速获取真实IP

dm360

由于网站启用了百度云加速，现在装了蜘蛛记录插件 发现会有百度蜘蛛每秒好几次的高频繁的去抓取网站分类信息伪静态的地址（使用的1314分类信息伪静态插件），由于高速频繁的抓取 导致PHP解析过多 最终CPU接近爆满。访问卡顿。 关掉伪静态插件就可以缓解很多 但这不是最终解决方案。
想知道是百度站长平台那边的设置抓取频次压力过大，还是有人模仿百度蜘蛛进行攻击，但是百度云加速最近改变了策略，所有蜘蛛抓取网站内容都经过百度云加速的CDN节点进行回源，那么也就无法判断这些节点IP后的真实IP是否为百度的蜘蛛。
如图


这是apache访问日志记录的蜘蛛信息
101.227.207.54 - - [23/Jun/2020:00:00:42 +0800] "GET /thread-htm-fid-48-sortid-3-banben-6-jdfwkey-ug3vt3-yuyan-1-zuoyong-8.html HTTP/1.1" 200 19339 "Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)"

经查证 确实是百度云加速的节点  如下图


下面是百度云加速客服给出的查看真实IP的解决方案

真实IP：为解决这个问题，可以通过在云加速转发的HTTP头信息中增加 X-Forwarded-For 信息，用于记录客户端的真实IP，这时web服务器的日志就可以使用 $http_x_forwarded_for变量记录远程客户端的真实IP。格式如下：
Nginx
'$http_x_forwarded_for - $remote_user [$time_local] "$request" ''$status $body_bytes_sent "$http_referer" ''"$http_user_agent" ';
Apache
格式如下：
LogFormat "%{X-Forwarded-For}i %l %u %t \"%r\" %>s %b \"%{Referer}i\" \"%{User-Agent}i\""
ASP
Request.ServerVariables("HTTP_X_FORWARDED_FOR")
PHP
$_SERVER["HTTP_X_FORWARDED_FOR"]
JSP
request.getHeader("HTTP_X_FORWARDED_FOR")



问题来了，这个HTTP头信息中增加 X-Forwarded-For 信息怎么添加？

我尝试将这个apache加载到discuz后台-全局-seo信息-其他的头部信息里
如下图

这样以脚本的形式添加在这里   是没有用的，apache访问日志 还是显示的CDN节点的IP  并没有显示真实的蜘蛛IP  无法查证 是否为百度的真实蜘蛛，如果是百度真实蜘蛛 我就去站长平台反馈。
有大神知道如何添加这个HTTP头信息吗？  感谢！！！！
补充一下
还是放在 伪静态规则里？？？？？？？？？？请赐教



——————————————————————————————————————————————————


后续更新 问题已解决



问题已解决，如果你是win系统 用的是apache  upupw环境包 可以在apache日志格式这里 添加红线处内容  日志会自动多出来一列IP为访客真实IP  第一列为CDN节点IP
添加内容 %{X-Forwarded-For}i     注意前后都有空格间隔非常简单，至于其他软件 如宝塔有没有相关设置我不太清除。


但是这样分析日志就无法进行读取真实IP了。比如360星图 他只能分析第一列的CDN IP
可以在上面日志格式那里吧系统默认的最前面的%h删除  这样日志就可以只统计真实IP 从而让日志分析软件正常运行。

我知道答案 回答被采纳将会获得1 贡献 已有5人回答

jnpar

CPU占用率过高有可能是其他原因。可以挨着关闭一下 插件进行排查

crx349

插件 不支持判断cdn ip获取 找作者升级下
cpu满不一定是蜘蛛问题 多方面找看看问题 特别是日志排查

dm360

这是百度官方客户回复 的解决方案  目前CDN暂时没法完全去掉。

fujie1982

缓存粒度设置为基础就可以了。但这样会改不了用户图像，需把图像改为动态调用。完美解决

小执念

https://www.hostarr.com/apache-mod_remoteip/
Apache 获取 CDN 后面访问用户的真实 IP