Forsknings- och utvecklingsenheten inom Department of Homeland Security, Science and Technology Directorate organiserade ett tekniskt sammanträde bestående av tekniska experter och volontärer för att hitta en algoritm för ansiktsigenkänning som kan identifiera personer med masker med högsta möjliga noggrannhet.
Evenemanget pågick i tio dagar. 582 volontärer testades av de 60 olika ansiktsigenkänningssystemen. De viktigaste anskaffningssystemen var Stone, Vly, West, Dans, Besek och, Pine som var en mix-and-match av sex olika bildsamlingssystem, parat med tio olika matchningsalgoritmer som utvärderades utifrån deras ansiktsfångande förmåga och tillförlitlighet. att identifiera ett ansikte med hög noggrannhet.
De olika AI-ansiktsigenkänningssystemen gav olika resultat. Genomsnittsnoggrannheten för att känna igen maskerade individer var 93% och samma för maskerade individer var i genomsnitt 77%. Den bästa tekniken var Dans som kunde identifiera maskerade människor 96% av tiden och den värsta tekniken gjorde det bara 4% av tiden. Resultaten baserades på effektivitet, tillfredsställelse, FaceFtAR (Failure To Acquire Rate) och FacemTIR (True Identification Rate)
Effektivitet definieras här som den genomsnittliga tid som krävs för testvolontärer att utföra en transaktion med varje system. När det gäller effektivitet var West och Dans bäst eftersom de bara tog 4 sekunders transaktionstid. Tillfredsställelse definieras här som andelen testvolontärer som gav positiva svar. West, Dans och Besek gav de mest tillfredsställande resultaten med ett antal på 95%.
Fail-to-Acquire Rate (FtAR) definieras här som andelen transaktioner som misslyckades med att fånga en bild, eller som misslyckades med att fånga en bild som kunde mallas av MdTF-matchningsalgoritmen. MdTF True Identification Rate (mTIR) definieras här som andelen transaktioner där den inlämnade biometriska bilden matchade rätt testvolontär eller var oidentifierad om sondämnet inte fanns i galleriet. I båda resultaten var Vly högst upp. Dess FtAR var 1,7% inom 20 sekunder och mTIR var 97,8% inom 20 sekunder.
Den fullständiga rapporten om evenemanget bekräftas inte ännu. Du kan kontrollera hela rapporten på MDTF som förväntas under de kommande veckorna.