Ontwikkelaars van LiveDune, een bedrijf voor sociale netwerkanalyse, hebben een neuraal netwerk gecreëerd dat dat wel kan
Kunstmatige intelligentie bezit er tweetalen: in mindere mate Russisch literair en tot in de perfectie het jargon van de Russische taal, dat in 2020-2022 werd gevormd. Om het neurale netwerk te trainen, gebruikten de ontwikkelaars woordenboeken van evaluatieve woorden en scheldwoorden. Maar ze richtten zich niet op literaire collecties, maar op de taal die op sociale netwerken wordt gesproken.
Voor initiële training, ontwikkelaars handmatigmarkeerde 10.000 Russischtalige opmerkingen van de sociale netwerken van de klanten van het bedrijf. Daarna is de dienst in gebruik genomen, maar, zoals de makers zeggen, vrijwel direct kwamen er klachten over het incorrecte werk van AI. Het programma herkende sarcasme niet goed en bijvoorbeeld de opmerking: "dit is een verdomde post" werd als positief beschouwd.
Service voorbeeld. Afbeelding: Live Dune
Om het systeem verder te trainen, hebben de makers gezorgdklanten de mogelijkheid om de beoordeling van "Olga Stanislavovna" aan te passen. De gecorrigeerde gegevens worden naar het systeem gestuurd en gebruikt om de algoritmen te verfijnen. In feite gebruikte het neurale netwerk meer dan 500 duizend records voor training.
Programmeurs zeggen dat het moeilijkste was:leer "Olga Stanislavovna" ironie en sarcasme te herkennen. Hiervoor werd bovendien trainingsmateriaal in het neurale netwerk geladen - woordenboeken van jargon en obsceniteiten. En natuurlijk oefenen op echte beoordelingen met feedback van AI-gebruikers.
"Olga Stanislavovna" heeft de meest relevantede woordenschat van moderne Russische slang - de taal die wordt gebruikt in sociale netwerken. Alleen al op VKontakte zijn ongeveer 20 miljoen reacties 'doorgegaan' via het neurale netwerk. De ontwikkelaars zijn van plan de door het systeem verzamelde gegevens te gebruiken om samen met filologen de Russische taal te bestuderen.
Leningen, afkortingen enspreektaal-spreektaal elementen worden massaal door ons gebruikt bij het communiceren op het netwerk. Woordenboeken die de taalnorm vastleggen, zijn altijd achtergebleven bij live spraak, maar het verschijnen van een dergelijk neuraal netwerk kan filologen helpen de ontwikkeling van de taal nauwkeuriger te volgen.
Maria Rogozhina, filoloog
Lees verder:
Binnenkort treft een zonnestorm de aarde: het materiaal vliegt met een snelheid van 800 km/s
Wetenschappers filmden een vreemd wezen met tentakels, die ze aanzagen voor een bloem
Rusland verlaat het ISS: wat gaat er nu gebeuren en waarom wordt het onderhoud van het station bedreigd