Вопросы с тегом «amazon-s3»

У меня есть DataFrame pandas, который я хочу загрузить в новый файл CSV. Проблема в том, что я не хочу сохранять файл локально перед переносом на s3. Есть ли какой-нибудь метод, например to_csv, для прямой записи фрейма данных в s3? Я использую boto3. Вот что у меня есть на данный …

126 python  csv  amazon-s3  dataframe  boto3 

Я следую инструкциям из этого ответа, чтобы создать следующую политику корзины S3: { "Id": "Policy1495981680273", "Version": "2012-10-17", "Statement": [ { "Sid": "Stmt1495981517155", "Action": [ "s3:GetObject" ], "Effect": "Allow", "Resource": "arn:aws:s3:::surplace-audio", "Principal": "*" } ] } Я получаю следующую ошибку: Действие не распространяется ни на какие ресурсы в заявлении Что мне …

124 amazon-web-services  amazon-s3 

У меня есть простая корзина, которая выглядит как images.mysite.comна моем S3 и других корзинах, содержащих резервные копии и т. Д. Я хочу разрешить конкретному пользователю доступ к images.mysite.comкорзине для загрузки изображений. Однако я НЕ хочу, чтобы он видел другие ведра; даже не то, что они существуют. Я не мог создать …

123 amazon-s3  policy  bucket 

Как создать папку под ведром с помощью botoбиблиотеки для Amazon s3? Я следовал руководству и создал ключи с разрешениями, метаданными и т. Д., Но нигде в документации boto не описывается, как создавать папки в ведре или создавать папку в папках в ведре.

123 amazon-s3  boto 

Мне известно о существовании https://wiki.apache.org/hadoop/AmazonS3 и следующих слов: S3 Native FileSystem (схема URI: s3n) Собственная файловая система для чтения и записи обычных файлов на S3. Преимущество этой файловой системы в том, что вы можете получить доступ к файлам на S3, которые были написаны с помощью других инструментов. И наоборот, другие …

121 amazon-web-services  amazon-s3  aws-sdk 

У меня ошибка . Разница между временем запроса и текущим временем слишком велика при вызове метода amazons3.ListObjects ListObjectsRequest request = new ListObjectsRequest() { BucketName = BucketName, Prefix = fullKey }; using (ListObjectsResponse response = s3Client.ListObjects(request)) { bool result = response.S3Objects.Count > 0; return result; } Что это могло быть?

120 amazon-s3 

Я работаю над небольшим веб-приложением (все на стороне клиента). Я хочу разместить его на Amazon S3. Я нашел несколько руководств по этому поводу и сумел создать себе корзину (с тем же именем, что и мой домен), установить ее как веб-сайт и загрузить некоторый контент. Где я борюсь, и где вся …

117 dns  amazon-s3  amazon-web-services  hosting 

$ aws s3 ls Could not connect to the endpoint URL: "https://s3.us-east-1a.amazonaws.com/" В чем может быть проблема?

117 amazon-web-services  amazon-s3 

Если я хочу загрузить все содержимое каталога на S3 на свой локальный компьютер, какую команду мне следует использовать cp или sync? Любая помощь будет высоко ценится. Например, если я захочу загрузить все содержимое «этой папки» на свой рабочий стол, будет ли это выглядеть так? aws s3 sync s3://"myBucket"/"this folder" C:\\Users\Desktop

116 windows  amazon-web-services  amazon-s3 

Я использую NodeJS AWS SDK для создания заранее подписанного URL-адреса S3. В документации приведен пример создания предварительно подписанного URL-адреса. . Вот мой точный код (с опущенной конфиденциальной информацией): const AWS = require('aws-sdk') const s3 = new AWS.S3() AWS.config.update({accessKeyId: 'id-omitted', secretAccessKey: 'key-omitted'}) // Tried with and without this. Since s3 is …

114 node.js  amazon-web-services  amazon-s3  aws-sdk-js 

У меня есть аккаунт AWS. Я использую S3 для хранения резервных копий с разных серверов. Вопрос: есть ли в консоли AWS какая-либо информация о том, сколько дискового пространства используется в моем облаке S3?

113 amazon-s3  amazon-web-services 

Я искал инструмент, который помог бы мне скопировать содержимое корзины AWS S3 во вторую корзину AWS S3 без загрузки содержимого сначала в локальную файловую систему. Я попытался использовать опцию копирования консоли AWS S3, но это привело к отсутствию некоторых вложенных файлов. Я пробовал использовать приложение Transmit (от Panic). Команда duplicate …

112 amazon-s3  copy  amazon-web-services 

У меня проблемы с использованием * в интерфейсе командной строки AWS для выбора подмножества файлов из определенного сегмента. Добавление *к такому пути, похоже, не работает aws s3 cp s3://data/2016-08* .

110 amazon-web-services  amazon-s3  aws-cli 

В boto 2 вы можете писать в объект S3, используя следующие методы: Key.set_contents_from_string () Key.set_contents_from_file () Key.set_contents_from_filename () Key.set_contents_from_stream () Есть ли эквивалент бото 3? Каков метод boto3 для сохранения данных в объект, хранящийся на S3?

109 python  amazon-web-services  amazon-s3  boto  boto3 

Я последовал примеру http://docs.aws.amazon.com/IAM/latest/UserGuide/access_policies_examples.html#iam-policy-example-s3, чтобы предоставить пользователю доступ только к одной корзине. Затем я протестировал конфигурацию с помощью плагина W3 Total Cache Wordpress. Тест не удался. Я также попытался воспроизвести проблему, используя aws s3 cp --acl=public-read --cache-control='max-age=604800, public' ./test.txt s3://my-bucket/ и это не удалось с upload failed: ./test.txt to s3://my-bucket/test.txt …

109 amazon-s3