PHPCrawl: исключить URL-адреса и использовать? Query =

Question

Я играю с PHPCrawl, и я хотел бы знать, знает ли кто-нибудь, можно ли исключить из сканирования все URL-адреса с параметрами (будь то .html или .php), например

domain.com/article.html?showComment=1289420017718

Answer 1

Добавить шаблон непоследовательного соответствия для любого URL, содержащего знак вопроса:

$crawler->addNonFollowMatch(".*\?.*")

Answer 2

Я просто подумал, что это работает лучше

$crawler->addNonFollowMatch("/\?/");