Obtener el html de un sitio web con ruby ​​on rails

Question

¿Cómo obtengo los datos de página de otro sitio web en algún lugar de la web con ruby ​​on rails?

Answer 1

puede utilizar httparty para obtener sólo los datos

Código de la muestra (de example):

require File.join(dir, 'httparty') 
require 'pp' 

class Google 
    include HTTParty 
    format :html 
end 

# google.com redirects to www.google.com so this is live test for redirection 
pp Google.get('http://google.com') 

puts '', '*'*70, '' 

# check that ssl is requesting right 
pp Google.get('https://www.google.com') 

Nokogiri realmente sobresale en el análisis de los datos .. Aquí hay un código de ejemplo de la Railscast:

url = "http://www.walmart.com/search/search-ng.do?search_constraint=0&ic=48_0&search_query=batman&Find.x=0&Find.y=0&Find=Find" 
doc = Nokogiri::HTML(open(url)) 
puts doc.at_css("title").text 
doc.css(".item").each do |item| 
    title = item.at_css(".prodLink").text 
    price = item.at_css(".PriceCompare .BodyS, .PriceXLBold").text[/\$[0-9\.]+/] 
    puts "#{title} - #{price}" 
    puts item.at_css(".prodLink")[:href] 
end 

Answer 2

Uso Net/HTTP (por ejemplo, leer this cheatsheet):

require "net/https" 

http = Net::HTTP.new "google.com", 80 
request = Net::HTTP::Get.new "/" 
response = http.request request 

puts response.code 
puts response.body 

Answer 3

Net::HTTP barcos en la biblioteca estándar, que es una ventaja, pero no son frescos bibliotecas de nivel superior puede echar un vistazo a, como rest-client:

RestClient.get('http://example.com/resource', params: {x: "1", y: "2"}) 

Answer 4

me gusta OpenURI a mí mismo si es sólo para simplemente obtener el contenido sin problemas.

Simplemente agregue require 'open-uri' al entorno y luego open('http://domain.tld/document.html').read.