Eu incorri em altas taxas de transferência de dados para o Amazon Simple Storage Service (Amazon S3). Quero identificar os buckets que causaram as altas taxas de transferência de dados.
Breve descrição
Você paga por toda a largura de banda que entra e sai do Amazon S3, exceto pelo seguinte:
- Os primeiros 100 GB de dados que são enviados pela Internet por mês
Observação: isso é agregado em todos os serviços e regiões AWS, exceto na Amazon Web Services na China e na AWS GovCloud (EUA).
- Dados que são recebidos pela Internet
- Dados que são transferidos entre buckets do S3 na mesma região
- Dados que são transferidos de um bucket do Amazon S3 para qualquer serviço na mesma região do bucket do S3
Observação: Isso inclui dados que são transferidos para uma conta da AWS diferente na mesma região.
- Dados que são transferidos para o Amazon CloudFront
Resolução
Para identificar os buckets responsáveis pela alta transferência de dados, verifique seu relatório de uso do S3. É possível verificar a operação, a região e a hora em que a transferência de dados ocorreu.
Para identificar os tipos de uso que correspondem à transferência de dados, consulte Entender seus relatórios de faturamento e uso da AWS para o Amazon S3.
Observação: As cobranças de transferência de dados são registradas como Region-DataTransfer-Out-Bytes no relatório de uso.
Examine os logs de acesso ao servidor do S3 dos buckets para obter informações detalhadas sobre as solicitações. É possível usar o Amazon Athena para consultar os logs de acesso ao servidor para obter informações sobre data e hora, operações e solicitantes específicos. Por exemplo, execute a consulta a seguir para ver a quantidade de dados transferidos por meio de um endereço IP específico em um período específico:
SELECT SUM(bytessent) as uploadtotal,SUM(objectsize) as downloadtotal,SUM(bytessent + objectsize) AS total FROM s3_access_logs_db.mybucket_logsWHERE remoteIP='1.2.3.4' AND parse_datetime(requestdatetime,'dd/mm/yyyy:HH:mm:ss Z')BETWEEN parse_datetime('2021-07-01','yyyy-mm-dd')AND parse_datetime('2021-08-01','yyyy-mm-dd');
Informações relacionadas
Entender as taxas de transferência de dados
Métricas de solicitação do Amazon S3 no Amazon CloudWatch