Я пытался удалить определенного бота как SemrushBot или googlebot (может быть другим), но он не работает. Спасибо
if(!preg_match('/SemrushBot/i', $_SERVER['HTTP_USER_AGENT']) || !preg_match('/googlebot/i', $_SERVER['HTTP_USER_AGENT']))
{
my code to execute
}