Cloud Dataflow 파이프라인이 50,000개 설치에서 데이터를 수신할 예정입니다. Dataflow가 필요에 따라 컴퓨팅을 확장할 수 있도록 어떤 파이프라인 구성을 변경해야 할까요?

Cloud Dataflow는 파이프라인의 작업 부하에 따라 자동으로 워커 수를 조정하여 확장합니다. 이 자동 확장이 효율적으로 작동하려면 최대 워커 수(maximum number of workers)를 적절히 설정해야 합니다. 50,000개 설치에서 데이터를 수신하는 경우, 기본 설정보다 더 많은 워커가 필요할 수 있으므로 최대 워커 수를 늘려 Dataflow가 필요한 만큼 확장할 수 있도록 해야 합니다. 다른 옵션들은 다음과 같은 이유로 정답이 아닙니다. 영역(The zone): Dataflow 파이프라인이 실행되는 지리적 위치를 결정하지만, 컴퓨팅 확장 기능 자체에는 직접적인 영향을 주지 않습니다. 워커 수(The number of workers): 이는 파이프라인 시작 시 초기 워커 수를 설정하는 것이며, 자동 확장을 위한 상한선을 지정하지 않습니다. 워커당 디스크 크기(The disk size per worker): 이는 각 워커가 사용할 수 있는 저장 공간을 결정하며, 컴퓨팅 리소스의 확장과는 관련이 없습니다.