我试图阻止yandex从我的网站。我已经尝试了解决方案张贴在其他线程，但他们不工作，所以我想知道，如果我做错了什么？
用户代理字符串为：
Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots我已尝试以下操作（一次一个）。RewriteEngine已打开
SetEnvIfNoCase User-Agent "^yandex.com$" bad_bot_block
Order Allow,Deny
Deny from env=bad_bot_block
Allow from ALL
SetEnvIfNoCase User-Agent "^yandex.com$" bad_bot_block
<RequireAll>
Require all granted
Require not env bad_bot_block
</RequireAll>有没有人能看出以上方法不起作用的原因或有其他建议？
2条答案
按热度按时间polhcujo1#
如果其他人有这个问题，下面的工作对我来说：
yc0p9oo02#
通过正则表达式中的 start 和 end-of-string 锚点，您基本上可以检查User-Agent字符串是否完全等于“yandex.com“（除了
.是 any 字符），这显然与指定的User-Agent字符串不匹配。您需要检查
User-Agent的头文件 * 是否包含 *“YandexBot”（或“yandex.com“）。您也可以在这里使用区分大小写的匹配，因为真实的的Yandex bot不会改变大小写。例如，请尝试以下方法：
请考虑改用
BrowserMatch指示词，这是SetEnvIf User-Agent的捷径。如果您使用的是Apache 2.4，则应使用两个代码块的
Require（第二个）变体。Order、Deny和Allow指令是Apache 2.2指令，以前在Apache 2.4上已弃用。但是，请考虑使用using
robots.txt，而不是首先阻止 crawling。Yandex supposedly supportsrobots.txt。