Lærer-nevrale nettverk "Olga Stanislavovna" ble lært russisk slang og sarkasme

Utviklere fra LiveDune, et analyseselskap for sosiale nettverk, har laget et nevralt nettverk som kan

vurdere tonen i kommentarer på sosiale nettverk. Programmet, som selskapets direktør kalte "Olga Stanislavovna" til ære for læreren, vil jobbe sammen med filologer.

Kunstig intelligens eier tospråk: i mindre grad russisk litterær og til perfeksjon slangen til det russiske språket, som ble dannet i 2020–2022. For å trene det nevrale nettverket brukte utviklerne ordbøker med evaluerende ord og banneord. Men de fokuserte ikke på litterære samlinger, men på språket som snakkes på sosiale nettverk.

For innledende opplæring, utviklere manueltmerket opp 10 000 russiskspråklige kommentarer fra de sosiale nettverkene til selskapets kunder. Etter det ble tjenesten satt i drift, men, som skaperne sier, kom det nesten umiddelbart klager på det feilaktige arbeidet til AI. Programmet gjenkjente ikke sarkasme godt, og for eksempel kommentaren: "dette er et fordømt innlegg" ble ansett som positiv.

Service eksempel. Bilde: Live Dune

For å videreutdanne systemet, sørget skaperne forkunder muligheten til å justere vurderingen av "Olga Stanislavovna". De korrigerte dataene sendes til systemet og brukes til å avgrense algoritmene. Faktisk brukte det nevrale nettverket mer enn 500 tusen poster for trening.

Programmerere sier at det vanskeligste varlære «Olga Stanislavovna» å identifisere ironi og sarkasme. For dette ble opplæringsmateriell i tillegg lastet inn i det nevrale nettverket - ordbøker med sjargong og uanstendigheter. Og selvfølgelig øv deg på ekte anmeldelser med tilbakemeldinger fra AI-brukere.

"Olga Stanislavovna" har det mest relevanteordforrådet til moderne russisk slang - språket som brukes i sosiale nettverk. Omtrent 20 millioner kommentarer "passerte" gjennom det nevrale nettverket på VKontakte alene. Utviklerne planlegger å bruke dataene som er akkumulert av systemet til å studere det russiske språket sammen med filologer.

Lån, forkortelser ogsamtale-samtale-elementer brukes massivt av oss når vi kommuniserer på nettverket. Ordbøker som fikser språknormen har alltid ligget bak levende tale, men fremveksten av et slikt nevralt nettverk kan hjelpe filologer mer nøyaktig å spore utviklingen av språket.

Maria Rogozhina, filolog

Les mer:

Snart vil en solstorm treffe jorden: materialet flyr med en hastighet på 800 km/s

Forskere filmet en merkelig skapning med tentakler, som de trodde var en blomst

Russland forlater ISS: hva vil skje nå og hvorfor vedlikeholdet av stasjonen er truet