Компания размещает более 300 глобальных веб-сайтов и приложений, и ей нужна платформа для анализа более 30 ТБ данных кликстрима в день. Что должен использовать архитектор решений для приема и обработки данных кликстрима?

Правильный ответ — использование Amazon Kinesis Data Streams для сбора данных, Kinesis Data Firehose для их передачи в Amazon S3, а затем загрузка в Amazon Redshift для анализа. Kinesis Data Streams идеально подходит для сбора больших объемов потоковых данных в реальном времени, таких как кликстримы. Kinesis Data Firehose обеспечивает простую и масштабируемую доставку этих данных в S3, который служит экономичным озером данных. Amazon Redshift — это полностью управляемое хранилище данных, оптимизированное для аналитики больших объемов данных, что делает его идеальным для анализа 30 ТБ данных кликстрима в день. Остальные варианты менее эффективны: AWS Data Pipeline и Amazon EMR подходят для пакетной обработки, но не для потоковой обработки данных в реальном времени. Auto Scaling группы EC2 для обработки данных требуют значительного управления и не так эффективны для потоковой обработки, как Kinesis. Кэширование в CloudFront и запуск Lambda при добавлении объектов в S3 не масштабируется так эффективно для непрерывного потока 30 ТБ данных в день и не обеспечивает интегрированного решения для потоковой обработки и аналитики.