¿Cómo elimino un bucket versionado en AWS S3 usando la CLI?

Me encontré con la misma limitación de la CLI de AWS. Encontré la solución más fácil de usar Python y boto3 :

BUCKET = 'your-bucket-here'

import boto3

s3 = boto3.resource('s3')
bucket = s3.Bucket(BUCKET)
bucket.object_versions.delete()

# if you want to delete the now-empty bucket as well, uncomment this line:
#bucket.delete()

Una versión anterior de esta respuesta usaba boto pero esa solución tenía problemas de rendimiento con un gran número de teclas, como señaló Chuckles.

Usando boto3 es aún más fácil que con la solución propuesta boto eliminar todas las versiones de objetos en un bucket S3:

#!/usr/bin/env python
import boto3

s3 = boto3.resource('s3')
bucket = s3.Bucket('your-bucket-name')
bucket.object_versions.all().delete()

Funciona bien también para grandes cantidades de versiones de objetos, aunque podría tomar algún tiempo en ese caso.

Puede eliminar todos los objetos del bucket s3 versionado. Pero no se como borrar objetos específicos. aws s3api delete-objects --bucket <value> --delete "$(aws s3api list-object-versions --bucket <value> | jq '{Objects: [.Versions[] | {Key:.Key, VersionId : .VersionId}], Quiet: false}')"

Espero que te sea útil.

Me encontré con problemas con solución de Abe como el generador list_buckets se utiliza para crear una lista masiva llamada all_keys y pasé una hora sin que se complete. Este ajuste parece funcionar mejor para mí, tenía cerca de un millón de objetos en mi cubo y contando!

import boto

s3 = boto.connect_s3()
bucket = s3.get_bucket("your-bucket-name-here")

chunk_counter = 0 #this is simply a nice to have
keys = []
for key in bucket.list_versions():
    keys.append(key)
    if len(keys) > 1000:
        bucket.delete_keys(keys)
        chunk_counter += 1
        keys = []
        print("Another 1000 done.... {n} chunks so far".format(n=chunk_counter))

#bucket.delete() #as per usual uncomment if you're sure!

Esperemos que esto ayude a cualquier otra persona que se encuentre con esta pesadilla S3!

1. Para eliminar especificar objeto(s), usando el filtro jq.
2. Es posible que necesite limpiar los 'DeleteMarkers' no solo las 'Versiones'.
3. Usando $() en lugar de ``, puede incrustar variables para bucket-name y key-value.

aws s3api delete-objects --bucket bucket-name --delete "$(aws s3api list-object-versions --bucket bucket-name | jq -M '{Objects: [.["Versions","DeleteMarkers"][]|select(.Key == "key-value")| {Key:.Key, VersionId : .VersionId}], Quiet: false}')"

Aquí hay un trazador de líneas que solo puede cortar y pegar en la línea de comandos para eliminar todas las versiones y eliminar marcadores (requiere aws tools, reemplace su copia de seguridad de nombre de cubo con su nombre de cubo)

echo '#!/bin/bash' > deleteBucketScript.sh && aws --output text s3api list-object-versions --bucket yourbucket-name-backup | grep -E "^VERSIONS" | awk '{print "aws s3api delete-object --bucket yourbucket-name-backup --key "$4" --version-id "$8";"}' >> deleteBucketScript.sh && . deleteBucketScript.sh; rm -f deleteBucketScript.sh; echo '#!/bin/bash' > deleteBucketScript.sh && aws --output text s3api list-object-versions --bucket yourbucket-name-backup | grep -E "^DELETEMARKERS" | grep -v "null" | awk '{print "aws s3api delete-object --bucket yourbucket-name-backup --key "$3" --version-id "$5";"}' >> deleteBucketScript.sh && . deleteBucketScript.sh; rm -f deleteBucketScript.sh;

Entonces podrías usar:

aws s3 rb s3://bucket-name --force