L'unità di ricerca e sviluppo all'interno del Department Of Homeland Security, Science and Technology Directorate ha organizzato un raduno tecnologico composto da esperti tecnologici e volontari per trovare un algoritmo di riconoscimento facciale in grado di identificare le persone con maschere con la massima precisione possibile.
L'evento è durato 10 giorni. 582 volontari sono stati testati da 60 diversi sistemi di riconoscimento facciale. I principali sistemi di acquisizione erano Stone, Vly, West, Dans, Besek e, Pine che erano un mix-and-match di sei diversi sistemi di raccolta di immagini, accoppiati a dieci diversi algoritmi di corrispondenza che sono stati valutati in base alla loro capacità di cattura del volto e affidabilità di identificare un volto con elevata precisione.
I diversi sistemi di riconoscimento facciale AI hanno dato risultati diversi. L'accuratezza media del riconoscimento di individui non mascherati era del 93% e lo stesso per gli individui mascherati era in media del 77%. La tecnologia più performante era Dans che era in grado di identificare le persone mascherate il 96% delle volte e la tecnologia peggiore lo faceva solo per il 4% delle volte. I risultati si basavano su efficienza, soddisfazione, FaceFtAR (tasso di mancata acquisizione) e FacemTIR (tasso di identificazione reale)
L'efficienza è qui definita come il tempo medio necessario ai volontari del test per eseguire una transazione con ciascun sistema. In termini di efficienza, West e Dans sono stati i migliori in quanto hanno impiegato solo 4 secondi di tempo di transazione. La soddisfazione è qui definita come la percentuale di volontari che hanno fornito risposte positive. West, Dans e Besek hanno dato i risultati più soddisfacenti con un numero del 95%.
Failure to Acquire Rate (FtAR) è qui definito come la proporzione di transazioni che non sono riuscite ad acquisire un'immagine o che non sono riuscite a catturare un'immagine che potrebbe essere modellata dall'algoritmo di corrispondenza MdTF. Il MdTF True Identification Rate (mTIR) è qui definito come la proporzione di transazioni in cui l'immagine biometrica presentata corrispondeva al volontario corretto del test o non era identificata se il soggetto della sonda non era nella galleria. In entrambi i risultati, Vly era al primo posto. Il suo FtAR era dell'1,7% entro 20 secondi e l'mTIR era del 97,8% entro 20 secondi.
Il report completo dell'evento non è stato ancora annunciato. Puoi controllare il rapporto completo su MDTF, previsto nelle prossime settimane.