Een bedrijf heeft één miljoen mobiele app-gebruikers en heeft bijna-realtime data-analyse nodig. De gegevens moeten in bijna-realtime worden versleuteld en centraal worden opgeslagen in Apache Parquet-formaat voor verdere verwerking. Welke oplossing biedt dit met de MINSTE operationele overhead?

De correcte optie gebruikt Kinesis Data Firehose en Kinesis Data Analytics. Kinesis Data Firehose is een volledig beheerde service die het laden van streaminggegevens naar data stores zoals Amazon S3 vereenvoudigt, inclusief automatische conversie naar Apache Parquet en encryptie, wat de operationele overhead minimaliseert. Kinesis Data Analytics is ideaal voor bijna-realtime analyse van streaminggegevens met minimale operationele overhead, omdat het een volledig beheerde service is. De andere opties zijn minder optimaal: Het gebruik van een Kinesis data stream met een Lambda-functie om gegevens naar Kinesis Data Analytics te sturen, voegt onnodige complexiteit en operationele overhead toe. Kinesis Data Firehose kan dit direct. Het gebruik van Amazon EMR voor analyse introduceert aanzienlijk meer operationele overhead dan Kinesis Data Analytics, omdat EMR-clusters moeten worden beheerd. Het combineren van Kinesis Data Firehose met EMR heeft nog steeds de hogere operationele overhead van EMR vergeleken met Data Analytics.