Когда вендор защиты данных пишет на сайте «точность детекции 99%», возникает ровно один вопрос: как это измерено? Без методики цифра не значит ничего — «99%» может означать честный span-level F1 на внешнем бенчмарке, а может — «в 99 из 100 сообщений сканер что-то нашёл». Это разные вещи, и разница…
Как мы измеряем точность детекции ПДн: pii-bench, golden-выборка и честные метрики
Это краткое изложение. Полный текст материала доступен на сайте источника.