Necesita un servicio para manejar trabajos por lotes por hora y procesamiento de transmisiones en tiempo real para los datos operativos entrantes, sin código de análisis existente. ¿Qué tecnología de Google Cloud debería usar?

Google Cloud Dataflow es la opción correcta porque es un servicio completamente administrado para ejecutar pipelines de procesamiento de datos por lotes y streaming. Está diseñado para manejar grandes volúmenes de datos y es ideal para casos de uso como el procesamiento de datos operativos en tiempo real y trabajos por lotes programados, sin requerir código de análisis preexistente. Google Cloud Dataproc es un servicio administrado de Apache Spark y Hadoop, más adecuado cuando ya se tienen cargas de trabajo existentes en esos ecosistemas. Google Container Engine (ahora Google Kubernetes Engine) con Bigtable es una plataforma de orquestación de contenedores, no una solución de procesamiento de datos por sí misma. Google Compute Engine con Google BigQuery combina una infraestructura de máquinas virtuales con un almacén de datos analítico, pero no ofrece las capacidades de procesamiento de streaming y lotes completamente administradas de Dataflow.