オンプレミスのKafkaトピックを、オンプレミスに新しいKafka ConnectプラグインをインストールせずにGCPにミラーリングしたいと考えています。ミラーリングを実現し、GCS/BigQueryにデータを書き込むデプロイパターンはどれですか？

このパターンは、オンプレミスに新しいKafka Connectプラグインをインストールせずに、オンプレミスのKafkaトピックをGCPにミラーリングするという要件を満たします。GCE上のKafkaクラスターがミラーリングのターゲットとなり、オンプレミスからGCPへのデータ転送を処理します。その後、DataprocまたはDataflowを使用してGCE上のKafkaからデータを読み取り、GCS/BigQueryに書き込むことができます。 他の選択肢は、オンプレミスにKafka Connectプラグインのインストールを必要とするか、ミラーリングの要件を満たしません。例えば、Pub/Sub Kafkaコネクタをオンプレミスにデプロイすることは、新しいプラグインのインストールに該当します。また、Pub/SubをSourceコネクタとして構成しても、オンプレミスのKafkaトピックのミラーリングは実現できません。