Jednostka badawczo-rozwojowa Departamentu Bezpieczeństwa Wewnętrznego, Nauki i Technologii zorganizowała zlot techniczny składający się z ekspertów technicznych i wolontariuszy w celu znalezienia algorytmu rozpoznawania twarzy, który może identyfikować osoby noszące maski z najwyższą możliwą dokładnością.
Wydarzenie trwało 10 dni. 582 ochotników zostało przetestowanych przy użyciu 60 różnych systemów rozpoznawania twarzy. Głównymi systemami akwizycji były Stone, Vly, West, Dans, Besek i Pine, które były połączeniem sześciu różnych systemów zbierania obrazów, połączonych z dziesięcioma różnymi algorytmami dopasowującymi, które zostały ocenione pod kątem ich zdolności do rejestrowania twarzy i niezawodności identyfikacji twarzy z dużą dokładnością.
Różne systemy rozpoznawania twarzy AI dały różne wyniki. Średnia dokładność rozpoznawania osób bez maski wynosiła 93%, a dla osób zamaskowanych średnio 77%. Najlepszą technologią był Dans, który był w stanie zidentyfikować zamaskowane osoby w 96% przypadków, a najgorsza technologia robiła to tylko w 4% przypadków. Wyniki oparto na wydajności, satysfakcji, FaceFtAR (wskaźnik niepowodzeń w uzyskaniu) i FacemTIR (wskaźnik prawdziwej identyfikacji)
Wydajność definiuje się tutaj jako średni czas potrzebny ochotnikom testowym na wykonanie transakcji z każdym systemem. Pod względem wydajności najlepsze były firmy West i Dans, które zajęły tylko 4 sekundy czasu transakcji. Zadowolenie definiuje się tutaj jako odsetek ochotników testowych, którzy udzielili pozytywnych odpowiedzi. West, Dans i Besek dali najbardziej satysfakcjonujące wyniki z liczbą 95%.
Wskaźnik niepowodzenia w uzyskaniu (FtAR) jest tutaj zdefiniowany jako odsetek transakcji, w których nie udało się przechwycić obrazu lub które nie zdołały uchwycić obrazu, który mógłby być wzorowany na algorytmie dopasowującym MdTF. Wskaźnik MdTF True Identification Rate (mTIR) definiuje się tutaj jako odsetek transakcji, w których przesłany obraz biometryczny pasował do właściwego ochotnika testowego lub był niezidentyfikowany, jeśli badanego nie było w galerii. W obu wynikach Vly był na szczycie. Jego FtAR wyniósł 1,7% w ciągu 20 sekund, a mTIR 97,8% w ciągu 20 sekund.
Pełne sprawozdanie z imprezy nie zostało jeszcze potwierdzone. Pełen raport można sprawdzić w MDTF, który jest oczekiwany w nadchodzących tygodniach.