Как загрузить через HTTP только кусок большого файла с ruby ​​

Question

Мне нужно всего лишь загрузить первые несколько килобайт файла по HTTP.

Я попытался

require 'open-uri' 
url = 'http://example.com/big-file.dat' 
file = open(url) 
content = file.read(limit) 

Но это на самом деле загружает весь файл.

Answer 1

Это похоже на работу при использовании сокетов:

require 'socket'     
host = "download.thinkbroadband.com"     
path = "/1GB.zip" # get 1gb sample file 
request = "GET #{path} HTTP/1.0\r\n\r\n" 
socket = TCPSocket.open(host,80) 
socket.print(request)   

# find beginning of response body 
buffer = ""      
while !buffer.match("\r\n\r\n") do 
    buffer += socket.read(1) 
end   

response = socket.read(100) #read first 100 bytes of body 
puts response 

Мне интересно, если есть «рубин путь».

Answer 2

Отъезд "OpenURI returns two different objects". Возможно, вы сможете злоупотреблять методами там, чтобы прервать загрузку/выброс остальной части результата после заданного предела.

Answer 3

Это старая тема, но это все еще вопрос, который кажется главным образом без ответа в соответствии с моими исследованиями. Вот решение, которое я придумал по обезьяне-заплат Net :: HTTP НЕМНОГО:

require 'net/http' 

# provide access to the actual socket 
class Net::HTTPResponse 
    attr_reader :socket 
end 

uri = URI("http://www.example.com/path/to/file") 
begin 
    Net::HTTP.start(uri.host, uri.port) do |http| 
    request = Net::HTTP::Get.new(uri.request_uri) 
    # calling request with a block prevents body from being read 
    http.request(request) do |response| 
     # do whatever limited reading you want to do with the socket 
     x = response.socket.read(100); 
    end 
    end 
rescue IOError 
    # ignore 
end 

Спасательное улавливает IOError, который выдается при вызове HTTP.finish преждевременно.

FYI, сокет в HTTPResponse объект не является истинным IO объекта (это внутренний класс называется BufferedIO), но это довольно легко обезьяньего патч, который тоже, чтобы имитировать IO методы вам нужно. Например, одна библиотека, я использовал (exifr) необходима readchar метод, который легко добавить:

class Net::BufferedIO 
    def readchar 
    read(1)[0].ord 
    end 
end