Использование Open-URI для извлечения XML и лучшие практики в случае проблем с удаленным URL-адресом, который не возвращается / не работает? - PullRequest
Новая
       16

Использование Open-URI для извлечения XML и лучшие практики в случае проблем с удаленным URL-адресом, который не возвращается / не работает?

4 голосов
/ 11 февраля 2011

Текущий код работает до тех пор, пока не будет удаленной ошибки: 

def get_name_from_remote_url
      cstr = "http://someurl.com"
      getresult = open(cstr, "UserAgent" => "Ruby-OpenURI").read
      doc = Nokogiri::XML(getresult)
      my_data = doc.xpath("/session/name").text
      #  => 'Fred' or 'Sam' etc
      return my_data
end

Но что, если удаленный URL-адрес истекает или ничего не возвращает?Как я могу это определить и, например, вернуть nil?

И дает ли Open-URI способ определить, как долго ждать, прежде чем сдаться?Этот метод вызывается, пока пользователь ожидает ответа, так как нам установить максимальное время отключения, прежде чем мы сдадимся и скажем пользователю: «Извините, удаленный сервер, к которому мы пытались получить доступ, сейчас недоступен»?

1 Ответ

9 голосов
/ 11 февраля 2011

Open-URI удобен, но эта простота использования означает, что он удаляет доступ ко многим деталям конфигурации, которые позволяют другие клиенты HTTP, такие как Net :: HTTP.

Это зависит от того, какая версияRuby вы используете.Для 1.8.7 вы можете использовать модуль Timeout .Из документов: 

require 'timeout'
begin
status = Timeout::timeout(5) {
  getresult = open(cstr, "UserAgent" => "Ruby-OpenURI").read
}
rescue Timeout::Error => e
  puts e.to_s
end

Затем проверьте длину getresult, чтобы увидеть, если вы получили какой-либо контент: 

if (getresult.empty?)
  puts "got nothing from url"
end

Если вы используете Ruby 1.9.2, вы можете добавить :read_timeout => 10 опция для метода open().

Кроме того, ваш код можно было бы сжать и сделать немного более гибким.Это позволит вам передать URL или использовать по умолчанию текущий используемый URL.Также прочитайте документы NodeSet от Nokogiri, чтобы понять разницу между xpath, /, css и at, %, at_css, at_xpath: 

def get_name_from_remote_url(cstr = 'http://someurl.com')
  doc = Nokogiri::XML(open(cstr, 'UserAgent' => 'Ruby-OpenURI'))

  # xpath returns a nodeset which has to be iterated over
  # my_data = doc.xpath('/session/name').text #  => 'Fred' or 'Sam' etc  

  # at returns a single node
  doc.at('/session/name').text
end
...