Een bedrijf heeft op meerdere locaties sensoren voor gegevensverzameling die een grote hoeveelheid gegevens streamen. Het bedrijf wil een schaalbaar, bijna-realtime platform op AWS om de streaminggegevens op te nemen en te verwerken, en de gegevens op te slaan in Amazon S3 voor latere rapportage. Welke oplossing voldoet aan deze vereisten met de MINSTE operationele overhead?

Amazon Kinesis Data Firehose is de beste keuze omdat het een volledig beheerde service is die speciaal is ontworpen voor het laden van streaminggegevens naar data lakes zoals Amazon S3, data stores en analyseservices. Het vereist minimale operationele overhead, omdat het automatisch schaalt en geen servers hoeft te provisioneren of te beheren. AWS Glue is een ETL-service (Extract, Transform, Load) die voornamelijk wordt gebruikt voor batchverwerking en het transformeren van gegevens, niet voor directe opname van streaminggegevens. Hoewel het kan worden geïntegreerd met streamingbronnen, is het niet de primaire service voor het opnemen van streams. AWS Lambda kan worden gebruikt voor het verwerken van streaminggegevens, maar vereist meer aangepaste code en beheer van de Lambda-functies, wat leidt tot hogere operationele overhead. AWS Database Migration Service (AWS DMS) is ontworpen voor het migreren van databases en niet voor het opnemen van algemene streaminggegevens van sensoren.