Evaluación NIST

Resultados de Cogent en evaluación NIST

FpTVE 2003: Evaluación de tecnología comercial para huellas dactilares 2003 (Fingerprint Vendor Technology Evaluation 2003)

La Evaluación de Tecnología Comercial para Huellas Dactilares 2003 (FpTVE) se realizó en nombre del Departamento de Justicia y cumple con parte de la obligación del Instituto Nacional de Normas y Tecnología (NIST) según la Ley del Patriota (Patriot Act) para certificar las tecnologías biométricas que pueden usarse en el programa Tecnología Indicadora de Condición de Inmigrante y Visita en los Estados Unidos (U.S. Visitor and Immigrant Status Indicator Technology). El estudio del NIST examinó 34 sistemas de venta en el mercado que se utilizan para la comparación de huellas dactilares y fue la prueba más amplia de la tecnología que alguna vez haya realizado un organismo del gobierno. Para posibilitar las pruebas exhaustivas se utilizaron 48.105 juegos de huellas dactilares de 25.309 personas, con un total de 393.370 imágenes de huellas dactilares diferenciadas.

Dentro de las evaluaciones de los sistemas comerciales proporcionados por 18 compañías, el estudio del NIST concluyó que Cogent suministró uno de los tres principales algoritmos de huellas dactilares más precisos. Como uno de los sistemas más precisos, Cogent presenta índices de error muy bajos de modo regular, a lo largo de una variedad de conjuntos de datos de sistemas de gran escala.

Aunque la FpVTE no pretendía evaluar los recursos necesarios para lograr niveles de tasa de falso negativo (FRR) y tasa de falso positivo (FAR) (como equipo y tiempo de respuesta), estos factores tendrán una relevancia significativa en los costos para desarrollar, implementar y operar un sistema para un usuario final. Para la evaluación comparativa FpVTE, los recursos necesarios para búsquedas con los algoritmos de Cogent fueron significativamente menos que con otros proveedores dentro del grupo de los sistemas más precisos. Además, Cogent realizó la prueba del sistema a gran escala en ocho días, mientras que al proveedor que ocupó el primer puesto le llevó diecinueve días.

SlapSeg04: Evaluación de segmentación de huellas dactilares de cuatro dedos 2004 (Slap Fingerprint Segmentation Evaluation 2004)

El Instituto Nacional de Normas y Tecnología (NIST) está realizando la SlapSeg04 en nombre de la División de Administración de Justicia (JMD) del Departamento de Justicia (DOJ) para el proyecto de integración IDENT/IAFIS. Esta evaluación se realizó para determinar la precisión de los algoritmos existentes de segmentación de huellas dactilares de cuatro dedos en una variedad de huellas dactilares de cuatro dedos de calidad operativa. Las huellas dactilares de cuatro dedos (slaps) se conocen también como "impresiones planas simultáneas de cuatro dedos". La segmentación de huellas dactilares de cuatro dedos es el proceso por el cual una única imagen que contiene cuatro imágenes de huellas dactilares se divide en cuatro imágenes de los dedos individuales. El algoritmo de Cogent fue uno de los más precisos que se utilizaron para segmentar imágenes de huellas dactilares de cuatro dedos en imágenes de huellas dactilares individuales.

Prueba del paquete de desarrollo de software (SDK) de huellas dactilares del NIST

Según estas pruebas independientes, el algoritmo de Cogent logró una tasa de verdadera aceptación (True Accept Rate, TAR) del 99%.

NISTIR 7221: Estudios de comparación de huellas dactilares individualizadas con comparadores SDK de proveedores ("Studies of One-to-One Fingerprint Matching with Vendor SDK Matchers")

Esta prueba evaluó la precisión de los sistemas de comparación de huellas dactilares comerciales basados en el paquete de desarrollo de software (SDK) actuales para aplicaciones de verificación individualizada. Se evaluaron los sistemas de comparación de huellas dactilares de doce proveedores.

NISTIR 7249: Comparación de dos dedos con comparadores del SDK de proveedores ("Two Finger Matching with Vendor SDK Matchers)

La evaluación de comparaciones de dos dedos es una extensión de la evaluación anterior que se utilizó para comprobar la precisión que puede lograrse mediante la combinación de los resultados de dedos índices para obtener una coincidencia. Estos resultados se basan en los comparadores del SDK provistos para la evaluación de SDK original de un solo dedo.

Rendimiento de comparaciones para el sistema de identificación de visitas en los Estados Unidos mediante el uso del informe de huellas dactilares planas (Matching Performance for the US-VISIT IDENT System Using Flat Fingerprints Report): NISTIR 7110

Este informe analiza el rendimiento de las comparaciones plana a plana del sistema de comparación de huellas dactilares para visitas en los Estados Unidos (US-VISIT). Se analizan las comparaciones de uno a muchos utilizadas para detectar inscripciones de visa duplicadas y las comparaciones de uno a uno utilizadas para verificar la identidad del titular de la visa. Con la selección correcta de un punto de operación, la precisión de uno a muchos para una comparación de dos dedos en una base de datos de 6.000.000 de sujetos es del 95% con una tasa de falsa coincidencia del 0,08%. Con dos dedos, la precisión de la comparación de uno a uno es del 99,5% con una tasa de falsa aceptación del 0,1%.

Estos resultados se lograron utilizando un paquete de desarrollo de software (SDK) proporcionado por Cogent que coincide con el algoritmo utilizado en el sistema para visitas en los Estados Unidos. El estudio del NIST concluyó que "La calidad de imagen de Cogent es un buen indicador del rendimiento de la comparación de uno a muchos del sistema IDENT. Las imágenes de mejor calidad (calidad 1) producen una TAR del 99% a una FAR del 1%. Las imágenes de peor calidad (calidad 8) producen una TAR del 53% a una FAR del 1%".

Además, "la calidad de imagen de Cogent es una estadística de buen nivel para todos los algoritmos evaluados para todos los conjuntos de datos utilizados. La tasa de error de las mejores huellas dactilares (calidad 1) siempre es menor que la tasa de error de cualquier otro nivel de calidad de imagen y la tasa de error de las peores huellas dactilares (calidad 8) es siempre la más alta..."