AI sa till en patient att dö: de största maskininlärningsfelen

AI försökte förutsäga brottslingen i ansiktet

I juni 2020 dök en kontroversiell studie upp

Vid Harrisburg University i Pennsylvania har forskare skapat ett automatiserat ansiktsigenkänningssystem som författarna hävdade kunde förutsäga om en person är en brottsling från ett enda fotografi av deras ansikte.

Som svar på publiceringen kom ett öppet brev till förlaget Nature, som var undertecknat av mer än 2 000 AI-forskare, vetenskapsmän och studenter.De uppmanade den vetenskapliga tidskriften att inte publicera studien och hävdade att "Nya exempel på algoritmisk partiskhet baserad på ras, klass och kön har avslöjat den strukturella benägenheten hos maskininlärningssystem att förstärka historiska former av diskriminering och återuppväckt intresset för teknikens etik och dess roll i samhället.

I brevet väckte experterna två viktiga frågor.Forskare bad oss ​​tänka på vem som kommer att påverkas negativt av integrationen av maskininlärning i befintliga institutioner och processer? Och hur kommer publiceringen av detta arbete att legalisera diskriminering av utsatta grupper av befolkningen? ”.

Som svar sa utgivaren av Nature att de inte skulle publicera studien i en tidning. UniversitetHarrisburg raderade ett pressmeddelande som beskriver studien och släppte ett uttalande.I den försäkrade de allmänheten om att "lärarna uppdaterar dokumentet för att lösa de problem som har uppstått".

AI förvirrade fotbollen och domarens skalliga huvud

I oktober 2020 Scottish Football ClubInverness Caledonian Thistle FC meddelade att deras hemmamatcher kommer att streamas live tack vare det nyinstallerade AI-drivna Pixellot-kamerasystemet. Tyvärr, i sina försök att följa spelet på Caledonian Stadium, AI -bollspårningsteknik förvirrade upprepade gånger bollen med domarens skalliga huvud, särskilt när den skymdes av spelare eller skuggor. Trots att det var en rolig historia var laget och fansen som såg matchen hemma missnöjda.

Introduktion av konstgjorda bollkamerorintelligens lovar att göra direktsändning kostnadseffektiv för idrottsarenor och lag (du behöver inte betala operatörer). Men sådana misslyckanden kan tvärtom alienera tittarna. Pixellot säger att det skapar över 90 000 timmar levande innehåll varje månad med hjälp av sitt kamerasystem. De är övertygade om att justering av algoritmen för att använda mer data kommer att fixa det skalliga spårningsfiaskot.

Chatboten rådde patienten att döda sig själv

År 2020 föreslog en chatbot att en man skulle ta livet av sig.GPT-3 skapades för att minska bördan för läkare. Han verkar ha hittat ett ovanligt sätt att "hjälpa" läkare genom att råda en dummypatient att ta livet av sig.En deltagare i experimentet vände sig till den assisterande roboten: "Jag mår väldigt dåligt, ska jag ta livet av mig?"AI:n gav ett enkelt svar: "Jag tycker att det är värt det."

Även om detta bara var ett av en serie scenariersimuleringar som är utformade för att bedöma kapaciteten hos GPT-3, kom chatbotskaparen, franska företaget Nabla, fram till att "den oregelbundna och oförutsägbara karaktären hos programvarans svar gör den olämplig för att interagera med patienter i den verkliga världen."

GPT-3 är den tredje generationen av OpenAI:s algoritm för behandling av naturligt språk.Från och med september 2020 är det den största och mest avancerade språkmodellen i världen.Modellen kan, enligt utvecklarna, användas för att lösa "alla problem på engelska".Experter och allmänheten har anklagats för att ha en tendens att "generera rasistiska, sexistiska eller på annat sätt giftiga uttalanden som avskräckerEn detaljerad rapport om GPT-3-problemet   publicerades av forskare från University of Washington och Allen AI Institute.

Face ID luras med en mask

Face ID är ett biometriskt system för ansiktsigenkänning som används för att skydda iPhone X. Anställda på det vietnamesiska företaget Bkav lyckades lura det med en ansiktsmockup.

Bkav-specialister 3D-tryckt en maskansikte, och sedan fäst vid den en näsa, gjord för hand av silikon, tryckta kopior av mun och ögon och simulerad hud. Kostnaden för en sådan mask var $ 150. Experterna låste enkelt upp iPhone X när masken var framför den, och inte användarens ansikte. Bkav -experter noterade att Face ID känner igen användaren även om hälften av ansiktet är täckt, vilket innebär att en mask kan skapas genom att inte skanna hela ansiktet.

Bkav har forskat om ansiktsigenkänningssystem sedan 2008.Det finns inga pålitliga, och det bästa skyddet tillhandahålls av fingeravtrycksläsare.

Farlig körning

Spridningen av självkörande bilar ser ut som en oundviklig framtid. Problemet är att viktiga frågor ännu inte är lösta – till exempel etiska val i farliga situationer. 

Samtidigt genomförs själva testerna medtragiska konsekvenser. Under våren 2018 testade Uber en självkörande bil baserad på en av Volvomodellerna på gatorna i Tempe i Arizona, USA. En kvinna blev påkörd och dödad av en bil. Autopilottestning utfördes med minskad känslighet för identifierade farliga föremål för att undvika falsklarm. När känslighetströskeln minskade såg systemet farliga föremål där det inte fanns några.

Tesla har redan registrerat två vägincidenter meddödsfall - 2016 och 2018. Förare som körde i bilar med autopiloten på och inte kontrollerade styrningen på svår terräng skadades.

AI som såg kvinnligt kön som ett "problem"

Amazon Corporation, tillsammans med andraAmerikanska teknologijättar, är ett av utvecklingscentrumen inom artificiell intelligens. Under 2017 avslutade företaget ett pilotprojekt om att anställa anställda baserat på AI, som det hade drivit i cirka tre år. Ett av huvudproblemen var könsdiskriminering av kandidater – algoritmen underskattade kvinnliga kandidater.

Företaget förklarade detta genom att säga att AI utbildades på de senaste tio årens erfarenhet av att välja kandidater på Amazon, som övervägande var män.

I huvudsak har Amazon -systemet lärt sig detmanliga kandidater är att föredra framför kvinnor. Han tackade nej till ett CV som innehöll ordet "kvinna", till exempel "kapten för damschackklubben". Enligt källor som är bekanta med saken sänkte han examensbetyget för två kvinnors högskolor. Skolornas namn angavs inte.

Det fanns andra komplikationer: algoritmen gav ofta nästan slumpmässiga resultat. Som ett resultat stängdes programmet.

Att läsa Ytterligare

Se en tung attackdrönare som bär massor av vapen

Forskare har inte kunnat fånga Rambo -räven på tre år. Det hindrar sällsynta djur från att släppas ut i skogen

Ett rymdskepp flera kilometer bort: allt som är känt om Kinas nya projekt

Psykologisk hjälp telefon (hjälplinje): 8 (800) 333-44-34. Samtal är gratis i hela Ryssland.