Pub/Sub показывает все опубликованные сообщения JSON, но на панели мониторинга в реальном времени, созданной с помощью Cloud Dataflow, некоторые сообщения отсутствуют. Что следует предпринять дальше?

Если сообщения отсутствуют в панели мониторинга, но видны в Pub/Sub, проблема, скорее всего, возникает в конвейере Cloud Dataflow или в приложении панели мониторинга. Пропуск фиксированного набора данных через конвейер Cloud Dataflow позволяет изолировать проблему. Если данные корректно проходят через конвейер и появляются на выходе, то проблема в приложении панели мониторинга. Если данные не появляются на выходе конвейера, то проблема в самом конвейере Cloud Dataflow. Проверка приложения панели мониторинга на ошибки отображения — это следующий шаг, но сначала нужно убедиться, что данные вообще доходят до него. Stackdriver Monitoring в Cloud Pub/Sub не поможет найти отсутствующие сообщения, так как Pub/Sub показывает их все. Изменение способа получения данных Cloud Dataflow из Pub/Sub не является первым шагом, так как текущая конфигурация может быть правильной, а проблема может быть в логике обработки данных.