Как использовать pentaho kettle для загрузки нескольких файлов из корзины s3

Question

Я хочу использовать шаг S3 CSV Input для загрузки нескольких файлов из ведра s3, а затем преобразовать и загрузить обратно в S3. Но я вижу, что этот шаг поддерживает только один файл одновременно, и мне нужно указать имена файлов, есть ли способ загрузить все файлы одновременно, указав только имя ведра, то есть <s3-bucket-name>/*?

Answer 1

S3-CSV-Input вдохновлен CSV-Input и не поддерживает обработку нескольких файлов, например, Text-File-Input, например. Сначала вам нужно будет retrieve the filenames, поэтому вы можете перебрать список имен файлов, как и с CSV-Input.