Экземпляр Cloud Composer 2 работает в подсети без доступа к Интернету. DAG обрабатывает по одному файлу Cloud Storage за раз; вы хотите, чтобы он запускался реактивно при появлении каждого нового файла. Какой дизайн позволяет бессерверному уведомителю запускать Composer без доступа к Интернету?

Правильный ответ — это единственный вариант, который позволяет бессерверному уведомителю (Cloud Function) запускать DAG в Cloud Composer 2, работающем в частной подсети без доступа в Интернет, используя частное подключение. Включение Airflow REST API позволяет Cloud Function взаимодействовать с Composer. Уведомления Cloud Storage, настроенные на запуск Cloud Function, обеспечивают реактивность. Создание конечной точки Private Service Connect (PSC) позволяет Cloud Function безопасно и приватно подключаться к Composer, обходя необходимость в публичном доступе к Интернету. Остальные варианты не подходят, потому что: Первый вариант предполагает использование push-подписки Pub/Sub, указывающей на URL-адрес веб-сервера, что требует доступа к Интернету для веб-сервера. Второй и четвертый варианты предлагают использовать VPC Serverless Access для доступа к URL-адресу веб-сервера, но это не обеспечивает прямого частного подключения к компонентам Composer, работающим в частной сети, без использования PSC или аналогичного механизма для Airflow API. VPC Serverless Access в основном предназначен для доступа бессерверных сервисов к ресурсам в VPC, но не для обеспечения частного доступа к внешнему Airflow API, который может быть размещен с внутренним IP-адресом.