Utvecklare från LiveDune, ett analysföretag för sociala nätverk, har skapat ett neuralt nätverk som kan
Artificiell intelligens äger tvåspråk: i mindre utsträckning rysk litterär och till perfektion det ryska språkets slang, som bildades 2020–2022. För att träna det neurala nätverket använde utvecklarna ordböcker med evaluerande ord och svordomar. Men de fokuserade inte på litterära samlingar, utan på språket som talas på sociala nätverk.
För inledande utbildning, utvecklare manuelltmärkt upp 10 000 ryskspråkiga kommentarer från företagets kunders sociala nätverk. Efter det togs tjänsten i drift, men, som skaparna säger, nästan omedelbart kom det klagomål om det felaktiga arbetet med AI. Programmet kände inte igen sarkasm väl, och till exempel kommentaren: "det här är ett förbannat inlägg" ansågs positivt.
Serviceexempel. Bild: Live Dune
För att vidareutbilda systemet tillhandahöll skaparnakunder möjlighet att justera bedömningen av "Olga Stanislavovna". Den korrigerade datan skickas till systemet och används för att förfina algoritmerna. Faktum är att det neurala nätverket använde mer än 500 tusen poster för träning.
Programmerare säger att det svåraste varlära "Olga Stanislavovna" att identifiera ironi och sarkasm. För detta laddades dessutom träningsmaterial i det neurala nätverket - ordböcker över jargong och obsceniteter. Och, naturligtvis, öva på riktiga recensioner med feedback från AI-användare.
"Olga Stanislavovna" har den mest relevantaordförrådet för modern rysk slang - språket som används i sociala nätverk. Cirka 20 miljoner kommentarer "passerade" genom det neurala nätverket enbart på VKontakte. Utvecklarna planerar att använda data som samlas in av systemet för att studera det ryska språket tillsammans med filologer.
Upplåning, förkortningar ochvardags-vardagselement används massivt av oss när vi kommunicerar på nätverket. Ordböcker som fixar språknormen har alltid släpat efter levande tal, men uppkomsten av ett sådant neuralt nätverk kan hjälpa filologer att mer exakt spåra språkets utveckling.
Maria Rogozhina, filolog
Läs mer:
Snart kommer en solstorm att träffa jorden: materialet flyger med en hastighet av 800 km/s
Forskare filmade en märklig varelse med tentakler, som de antog för en blomma
Ryssland lämnar ISS: vad kommer att hända nu och varför underhållet av stationen är hotat