Вопросы по теме 'amazon-s3'

Как указать корзину S3 в качестве входных данных для EMR
Можно ли вместо копирования в HDFS просто получить массив объектов в корзине S3 для обработки в EMR? Я пробовал это, и я продолжаю либо получать предупреждения безопасности об отсутствии учетных данных (даже после того, как я добавляю их в конфиги)...
1134 просмотров
schedule 25.05.2024

S3 Bucket Region - www. проблема с поддоменом
Я создал корзину для своей корневой папки в стандартном регионе США, но когда я создал свой www. субдомен, который можно перенаправить в корневую папку, я поместил его в регион Орегон. Перенаправление из адресной строки не работает (я настроил его...
2553 просмотров

Как я могу легко определить, существует ли ресурс корзины Boto 3 S3?
Например, у меня есть этот код: import boto3 s3 = boto3.resource('s3') bucket = s3.Bucket('my-bucket-name') # Does it exist???
57064 просмотров

Как сделать общедоступными файлы загрузки, принадлежащие службе s3-log-service?
Я создал корзину для хранения файлов журнала, созданных службой s3-log-service, и сделал разрешения так, чтобы корзина могла быть как в списке, так и с общедоступным содержимым. Я могу перечислить содержимое корзины, но веб-доступ к журналу запрещен...
305 просмотров
schedule 24.05.2024

Чтение/запись файлов паркета с помощью AWS Lambda?
Привет, мне нужна лямбда-функция, которая будет читать и записывать файлы паркета и сохранять их на S3. Я попытался создать пакет развертывания с библиотеками, которые мне нужны для использования pyarrow, но я получаю сообщение об ошибке...
7831 просмотров
schedule 31.05.2024

Пользователь root не может видеть все корзины S3 в веб-консоли AWS
Мой вопрос похож на этот вопрос в том, что конкретная корзина S3, которую я создал, не отображается в веб-консоли. Кроме того, если я попытаюсь создать ведро с тем же именем.. Название сегмента уже существует Для ясности, я являюсь...
60 просмотров
schedule 29.03.2024

Как узнать, был ли отключен AmazonS3Client?
Есть ли способ узнать, был ли отключен AmazonS3Client? Ниже приведен сценарий, который я пытаюсь реализовать, чтобы каждый раз не создавать новых клиентов и убедиться, что если какой-либо другой компонент отключит его (по ошибке), он не нарушит...
182 просмотров
schedule 03.05.2024

AWS DataSync не смог обнаружить файлы в исходной файловой системе NFS.
Я пытаюсь синхронизировать данные из локальной виртуальной машины в корзину AWS S3 с помощью AWS Data Sync. Я уже настроил агент AWS Data Sync на локальной виртуальной машине. Агент теперь находится в сети, и мы также создали новую задачу. Задача...
256 просмотров

Загрузка списка файлов с помощью aws-sdk-cpp
Я пытаюсь загрузить список файлов на aws s3, используя cpp sdk. Но загружаются только несколько файлов, и он завершается перед загрузкой всех файлов. Я использую API загрузки aws s3 cpp sdk. bool OnUpload_test(bool status, const char*...
141 просмотров