Usted produce 20.000 archivos CSV/hora (<4 KB cada uno) desde un entorno on-prem a GCP a través de un enlace de 50 Mbps con 200 ms de latencia utilizando una VM SFTP. El volumen puede duplicarse estacionalmente. ¿Qué dos acciones debería tomar? (Elija dos).

Rediseñar la ingesta para usar gsutil en paralelo es efectivo porque gsutil está optimizado para transferencias a Cloud Storage, manejando la paralelización automáticamente y mejorando el rendimiento, especialmente con muchos archivos pequeños. Agrupar archivos pequeños en TARs reduce la sobrecarga por archivo (establecimiento de conexión, metadatos) y mejora la eficiencia de la transferencia, ya que se transfieren menos objetos grandes en lugar de muchos pequeños. La compresión por archivo no es ideal para archivos ya muy pequeños (<4KB), ya que la sobrecarga de compresión/descompresión podría superar los beneficios. Aumentar el ancho de banda es costoso y no resuelve la ineficiencia de transferir muchos archivos pequeños. Usar un endpoint S3 con Storage Transfer Service es una opción, pero gsutil o la agrupación de archivos son soluciones más directas y eficientes para este escenario específico de muchos archivos pequeños.