Вы хотите обнаруживать мошеннические учетные записи и определять, соответствует ли вновь созданная учетная запись каким-либо ранее известным мошенническим учетным записям. Вы очищаете логи с помощью AWS Glue во время приема данных. Какой подход следует использовать для поиска вероятных дубликатов или совпадающих мошеннических учетных записей?

AWS Glue FindMatches — это преобразование машинного обучения, специально разработанное для идентификации неточных дубликатов или совпадающих записей в наборах данных, даже если нет общего идентификатора. Это идеально подходит для обнаружения мошеннических учетных записей, которые могут иметь небольшие вариации в данных, но по сути являются одними и теми же. Amazon Athena не имеет встроенной функции FindDuplicates для неточных совпадений; она предназначена для SQL-запросов. AWS Glue Crawler используется для вывода схемы данных и создания таблиц в Data Catalog, а не для обнаружения дубликатов. AWS Glue Data Catalog хранит метаданные, но не выполняет анализ данных для поиска дубликатов.