Попытка разобрать все URL-адреса из файла или в этом случае удаленный URL-адрес

Question

Я пытаюсь разобрать 3 аргумента (это работает) и запросить файл, в котором есть куча txt и URL-адресов. Я пытаюсь поместить каждый URL в массив, который я попробовал с некоторым регулярным выражением без везения, а также с scan(URI.regexp) et.c и не могу видеть, что я делаю неправильно.

#!/usr/bin/env ruby 
require 'uri' 
require 'open-uri' 

HOST=ARGV[0] 
ID=ARGV[1] 
VERSION=ARGV[2] 
MYLINKS = Array.new 

file = open("http://#{HOST}/v1/dc/manifest/#{ID}/#{VERSION}").read 

file.each_line do |line| 
    #puts "doing #{line}" # this works.. 
    MYLINKS << URI.extract(line, ['http', 'https']) 
end 

PS: файл является файлом JSON. Это все работает над скриптом Bash, но я переношу его на Ruby. В сценарии Bash загрузить файл в /tmp я разобрать его с awk/tr т.д.

Answer 1

С клиентом API, как HTTParty вы действительно не должны знать JSON, потому что ответы обрабатываются в структуре данных, вы можете извлечь. Вы можете начать с простого класса:

require 'httparty' 

class MyApi 
    include HTTParty 
    format :json 
end 

Затем вы можете сделать следующее:

response = MyApi.get("http://#{HOST}/v1/dc/manifest/#{ID}/#{VERSION}") 

и ответ будет анализироваться в хэш-структуру, что вы будете в состоянии вытащить ваши URL-адреса из надежным способом.

Если ваш API требует аутентификации или публикации данных, его легко добавить. В самом камне есть several examples, поэтому вы можете видеть, как делаются разные вещи.

Answer 2

Вы должны начать с замены постоянной MYLINKS с помощью переменной, например my_links. Это позволит вам добавлять элементы в массив my_links. Ruby будет считать, что любое имя, начинающееся с прописной буквы (например, MYLINKS, MyLinks), является константой.

#!/usr/bin/env ruby 
require 'uri' 
require 'open-uri' 

HOST=ARGV[0] 
ID=ARGV[1] 
VERSION=ARGV[2] 
my_links = [] 

file.each_line do |line| 
    my_links << URI.extract(line, ['http', 'https']) 
end