Ошибка «Перенаправление на ограниченный URL robots.txt» YQL для домена Google

Question

Я использую консоль YQL и хочу вернуть результаты по этой ссылке в Google Shopping

Используя следующее в YQL:

  select content from html where url="www.google.com/products/seller?hl=en&q=burkett+restaurant+equipment+reviews&tbo=u&tbm=shop&zmi=basequipment.com&cmi=12986189937115136" and xpath="//body"

Это говорит:

Перенаправлен на URL-адрес с ограниченным доступом robots.txt

и не даст никаких результатов, есть ли способ обойти это?

Answer 1

Вы можете использовать открытые таблицы:

http://developer.yahoo.com/yql/console/?q=show%20tables&env=store://datatables.org/alltableswithkeys#h=select%20content%20from%20data.headers%20where%20url%3D%22www.google.com/products/seller%3Fhl%3Den%26q%3Dburkett+restaurant+equipment+reviews%26tbo%3Du%26tbm%3Dshop%26zmi%3Dbasequipment.com%26cmi%3D12986189937115136%22