boto3

9зной

2ответ

Изменение числа повторных попыток запроса в boto3

В boto3 или botocore, как мне сделать эквивалент установки количества повторов запросов? например. in boto2 from boto import config config.set('Boto', 'num_retries', '20') Как это сделать в boto3?

2зной

1ответ

Очереди AWS sqs не перечисляют всех очередей

Я новичок в AWS. Я начинаю быстро запускать учебники AWS. Я следил за кодом и sqs-документами AWS. Это следующий код, который я написал import boto3 from boto3.session import Session session = Sess

1зной

2ответ

Python - создание пакета развертывания aws лямбда

Я хочу, чтобы скрипт обновил код для моей AWS Lambda, используя задачу Fabric. Boto3 api ожидает байтовый массив zip-файла с кодировкой base-64. Что было бы самым простым способом создать его, если у

3зной

3ответ

Как выполнить команды в экземпляре AWS с помощью Boto3

Может ли кто-нибудь сказать мне, можем ли мы выполнить команды оболочки с помощью Boto3 на запущенном экземпляре AWS. Я прочитал в нескольких местах о «boto.manage.cmdshell», но устарел в Boto3. Ценит

0зной

1ответ

Что делает настройка «max_io_queue» в файле boto3.s3.transfer.config?

В TransferConfig, что будет увеличивать или уменьшать max_io_queue с помощью boto3.transfer.download_file() ?? Я попытался изучить исходный код. Кажется, это связано с размером очереди в MultipartDown

0зной

1ответ

Как автоматизировать разрешение доступа к URL-адресу S3 http:

У меня есть url (в виде https://s3.amazonaws.com/...), Указывающий на файл в S3, и я хочу, чтобы он был загружен пользователем, поэтому я установил разрешение с панели управления S3 в консоли AWS но я

1зной

1ответ

PySpark бросает java.io.EOFException при чтении больших файлов с помощью boto3

Я использую boto3 для чтения файлов с S3, это показалось намного быстрее, чем sc.textFile(...). Эти файлы составляют от 300 МБ до 1 ГБ. Процесс идет как: data = sc.parallelize(list_of_files, numSlices

6зной

2ответ

Создание каталогов в Amazon S3 с использованием python, boto3

Я знаю, что ведра S3 действительно не имеют каталогов, потому что хранилище плоское. Но можно создавать каталоги программно с помощью python/boto3, но я не знаю, как это сделать. Я видел это на докуме

1зной

1ответ

Как выполнить учетную загрузку с s3 с помощью boto3 без сохранения файла?

Несложно выполнить дипломированный загрузку с s3 в файл с помощью import boto3 s3 = boto3.resource('s3') def save_file_from_s3(bucket_name, key_name, file_name): b = s3.Bucket(bucket_name)

1зной

1ответ

Команда копирования S3 дает ошибку + как отбирать секретные ключи из команды копирования

Почему моя команда копирования S3 в redshift дает эту ошибку? Это команда coppy: COPY dbtablename from 's3://rcname/foldername/file.csv CREDENTIALS 'aws_access_key_id=xxxxxxx;aws_secret_access_key=yyy