关于url区分大小写问题导致robots.txt无法被抓取到正确信息，有大佬知道怎么修改吗

hesenwei · 发表于 2019-11-17 13:41:07

百度上看到的  URL_CASE_INSENSITIVE' => true,属性为true就行了。但是小白不知道这段代码在哪改，求大神指点

之前没有伪静态的时候不太清楚有没有这个问题，应用了官方给的4.0伪静态规则，今天去提交收录才发现robots. txt抓取的信息不对，显示无法加载模块  ，但是测试抓取Robots. txt就能抓取到正确信息，在其他站长工具强测试robots也是显示文件不存在或文件错误。
求大神指点  感激不尽！

hesenwei · 发表于 2019-11-17 13:45:35

具体情况，大神可以看图片地址后边加上大小写robots
感谢

yangyu6298086 · 发表于 2020-1-9 14:19:55

php版本高了

		自动登录	找回密码
密码			立即注册

[PHP-使用与交流] 关于url区分大小写问题导致robots.txt无法被抓取到正确信息，有大佬知道怎么修改吗

本帖子中包含更多资源