найти определенные файлы, используя шаблон glob

Question

Я использую logstash, чтобы постоянно искать новые файлы и передавать данные в разные системы.

Сейчас я использую этот конфиг:

input { 

    file { 
    type => "source" 
    path => "/ebs/**/*-*csv" # recursivly check subfolders 
    sincedb_path => "/usr/local/logstash/sincedb" 
    sincedb_write_interval => 1 
    discover_interval => 4 
    start_position => "beginning" 
    stat_interval => 1 
    } 
} 

Это прекрасно работает, но то, что я хочу сделать, это что-то вроде этого:

path => "/ebs/**/*-[0-9]{10}.csv" 

Можно ли включать регулярное выражение, как это в путь?

Answer 1

Logstash File Input API поддерживает только glob (Wildcard), так как поддержка Unix оболочек. Например, если вы список файлов в системе Unix с помощью Глоб шаблона,

$ Ls [0-9] .csv

Он может показать файл "1.csv"

Но когда вы добавляете регулярное выражение,

$ Ls [0-9] {1} .csv

Система показывает

LS: [0-9] {1} .csv: Нет такого файла или каталога

Итак, если вы хотите добавить регулярное выражение, может быть, вы должны соответствовать globbing pattern , Такие, как

путь => «/ EBS/*/* - [0-9] [0-9] [0-9] [0-9] [0-9] [0-9] [0-9] [0-9] [0-9] [0-9] .csv "

Надеюсь, это может вам помочь.

Answer 2

Вы можете использовать Rake::FileList, он идеально подходит от работы:

require rake 
FileList.new("/ebs/**/*-[0-9]{10}.csv") 

Если сделать работу для вас