Uma empresa usará o Amazon DynamoDB como banco de dados principal, mas os itens de dados de entrada podem exceder os limites de tamanho de item do DynamoDB (tamanho máximo atual de 700 KB e crescente). Qual solução lida com grandes volumes de dados com a maior eficiência operacional?

A solução mais eficiente operacionalmente para dados que excedem os limites de tamanho do DynamoDB é armazená-los no Amazon S3 e referenciá-los no DynamoDB. O S3 é um serviço de armazenamento de objetos altamente escalável e durável, ideal para grandes volumes de dados. Armazenar um ponteiro (URL S3) no DynamoDB mantém a capacidade de pesquisa rápida do DynamoDB para metadados, enquanto o S3 gerencia o armazenamento dos dados maiores. A opção de filtrar dados com Lambda e armazená-los no DocumentDB adiciona complexidade e custo desnecessários, além de introduzir outro banco de dados para gerenciar. Dividir dados grandes em vários itens no DynamoDB é ineficiente e pode levar a problemas de consistência e recuperação. A compactação gzip com Lambda pode reduzir o tamanho, mas ainda pode não ser suficiente para dados muito grandes, e o DynamoDB não é otimizado para armazenar blobs binários grandes.