En urettmessig pågripelse bygget på en maskins gjetning

En bestemor fra Tennessee saksøker for 10 millioner dollar etter at hun sier en påstått AI-basert ansiktsgjenkjenning førte til at hun ble feilaktig anklaget for banktyveri i Nord-Dakota og holdt i varetekt i seks måneder. Saken, først rapportert av ABC News, reiser skarpe spørsmål om hvor mye tillit politiet bør ha til automatiserte identifikasjonsverktøy når konsekvensene av en feil kan bety måneder bak lås og slå for en uskyldig person.

Ifølge rapporten ble kvinnen knyttet til bankbedragerier hun sier hun ikke begikk, etter at programvare for ansiktsgjenkjenning koblet bildet hennes til overvåkingsopptak. Hun tilbrakte et halvt år i varetekt før saken mot henne kollapset, og hun fremmer nå et søksmål med krav om 10 millioner dollar i erstatning for prøvelsen.

Hvordan feil i ansiktsgjenkjenning oppstår

Systemer for ansiktsgjenkjenning fungerer ved å sammenligne et bilde eller en videoramme med en database med bilder og generere en sannsynlighetsscore for et treff. Denne scoren er et statistisk anslag, ikke en sikkerhet. Når etterforskere eller påtalemyndigheter behandler algoritmens resultat som endelig bevis i stedet for ett spor blant mange, øker risikoen for feilaktig anklage kraftig.

Disse systemene har dokumenterte nøyaktighetsgap avhengig av bildekvalitet, belysning, kameravinkel og den demografiske sammensetningen av treningsdataene som brukes til å bygge dem. Et kornete overvåkingsbilde, et delvis profilbilde eller et uvanlig ansiktsuttrykk kan alle drive en algoritme mot et falskt positivt resultat. Når dette feilaktige treffet blir grunnlaget for en pågripelsesordre, flyttes byrden med å bevise uskyld over på den feilaktig anklagede, ofte med livsendrende konsekvenser som de seks månedene i varetekt som beskrives i denne saken.

Personvern og borgerrettigheter står på spill

Dette søksmålet er en del av et bredere mønster av bekymring for hvordan politimyndigheter tar i bruk ansiktsgjenkjenning uten konsistente nasjonale standarder, tilsyn eller åpenhetskrav. I motsetning til et fingeravtrykk eller DNA-treff, som vanligvis gjennomgår streng rettsmedisinsk validering før det brukes i retten, kan resultater fra ansiktsgjenkjenning genereres umiddelbart og anvendes med langt mindre gransking i feltet.

Det underliggende problemet er et spørsmål om data og samtykke. De fleste hvis ansikter havner i disse matchingssystemene, har aldri samtykket til at bildene deres brukes på denne måten. Bilder hentet fra førerkortdatabaser, sosiale medier eller offentlige overvåkingskameraer kan alle mates inn i gjenkjenningsverktøy uten at den enkelte vet det. Når en algoritme feiler, har den skadde personen ofte ingen anelse om at deres biometriske data i det hele tatt var en del av prosessen – før de allerede står overfor strafferettslige anklager.

Denne mangelen på åpenhet gjenspeiler debatter som foregår på andre områder av digital politikk, der kjernespørsmålet er hvem som kontrollerer flyten av personopplysninger og under hvilke regler. Akkurat som diskusjoner om nettnøytralitet handler om å sikre rettferdig og lik behandling av informasjon som beveger seg over nettverk, handler debatten om ansiktsgjenkjenning om å sikre rettferdig og ansvarlig behandling av personlige biometriske data som beveger seg gjennom rettshåndhevelsessystemer.

Hva dette betyr for deg

De fleste vil aldri oppleve en urettmessig pågripelse knyttet til ansiktsgjenkjenning, men denne saken er en påminnelse om at biometriske data samlet inn for ett formål kan ende opp med å bli brukt på måter enkeltpersoner aldri forutså eller samtykket til. Ansiktet ditt kan, i motsetning til et passord, ikke endres hvis det misbrukes eller feilmatches av et mangelfullt system.

Hvis du bor eller jobber i et område der politiet bruker ansiktsgjenkjenningsteknologi, er det verdt å forstå hvilke lokale retningslinjer, om noen, som styrer denne bruken. Noen jurisdiksjoner krever menneskelig gjennomgang før et algoritmisk treff kan føre til pågripelse, mens andre ikke gjør det. Å vite om disse beskyttelsestiltakene finnes i ditt lokalsamfunn kan hjelpe deg med å argumentere for sterkere beskyttelse hvis de mangler.

For enkeltpersoner som er bekymret for sitt eget biometriske fotavtrykk, er det praktiske skritt å gjennomgå personverninnstillinger på sosiale medieplattformer, forstå hvilke offentlige databaser som lagrer bildet ditt, og holde seg informert om lokal og statlig lovgivning om ansiktsgjenkjenning. Påvirkningsgrupper og lovgivere i flere delstater har allerede presset på for restriksjoner eller forbud mot politiets bruk av teknologien, og offentlig press har historisk vært en drivende faktor i slike politiske endringer.

Det større bildet

Dette søksmålet på 10 millioner dollar vil sannsynligvis tiltrekke seg fortsatt oppmerksomhet mens det beveger seg gjennom rettssystemet, og det føyer seg til en voksende mengde saker som utfordrer hvordan AI-verktøy for ansiktsgjenkjenning brukes i straffeetterforskning. Uansett utfallet understreker saken en enkel sannhet: teknologi markedsført som en etterforskningssnarvei har reelle menneskelige kostnader når den svikter, og disse kostnadene rammer hardest dem som er dårligst rustet til å kjempe imot.

Ettersom verktøy for ansiktsgjenkjenning blir vanligere i politiarbeid, er det å holde seg informert om hvordan disse systemene fungerer, hvor dine biometriske data lagres, og hvilke beskyttelsestiltak som finnes i ditt område, en av de mest praktiske måtene å beskytte deg selv mot å bli den neste advarende overskriften.