Существуют необработанные (raw) и обработанные (curated) зоны Dataplex. Команда загружает файлы JSON и CSV в ресурс-корзину (bucket asset) в обработанной зоне, но Dataplex auto-discovery их не обнаруживает. Что следует сделать, чтобы Dataplex обнаружил эти файлы?

Dataplex auto-discovery предназначен для обнаружения данных в необработанных (raw) зонах, где хранятся данные в их исходном формате. Обработанные (curated) зоны предназначены для хранения очищенных, преобразованных и структурированных данных, обычно в форматах, оптимизированных для анализа, таких как Parquet или Avro, и Dataplex ожидает, что схемы для этих данных будут определены. Перемещение файлов JSON и CSV в необработанную зону позволит Dataplex автоматически обнаружить их схемы и метаданные. Включение auto-discovery для обработанной зоны не решит проблему, так как она не предназначена для таких форматов. Загрузка в BigQuery или изменение прав доступа к объектам не относятся к механизму auto-discovery Dataplex.