Телеметрия хранится по регионам (США, Европа, Азия). Какой подход следует использовать для экономичного запуска единого отчета по всем необработанным данным телеметрии?

Правильный ответ предусматривает предварительную обработку и сжатие данных в каждом регионе, что снижает объем данных, передаваемых между регионами, и, следовательно, затраты на исходящий трафик. Использование регионального бакета (Regional bucket) для агрегированных данных является экономичным, поскольку хранение в нем дешевле, чем в многорегиональном (Multi-Region bucket), если нет строгих требований к доступности из разных географических точек. Затем единый кластер Cloud Dataproc может эффективно обработать эти сжатые данные. Перемещение всех данных в одну зону или регион до обработки неоптимально из-за высоких затрат на передачу данных и потенциальных задержек. Создание кластера в каждом регионе для обработки, а затем перемещение в Multi-Region bucket увеличивает затраты на хранение без необходимости, если данные будут обрабатываться централизованно.