Разработчиците от LiveDune, компания за анализ на социални мрежи, създадоха невронна мрежа, която може
Изкуственият интелект притежава двеезици: в по-малка степен руски литературен и до съвършенство жаргонът на руския език, който се формира през 2020–2022 г. За да обучат невронната мрежа, разработчиците са използвали речници на оценъчни думи и псувни. Но те се фокусираха не върху литературните сборници, а върху езика, който се говори в социалните мрежи.
За първоначално обучение, разработчиците ръчномаркира 10 000 коментара на руски език от социалните мрежи на клиенти на компанията. След това услугата беше пусната в експлоатация, но, както казват създателите, почти веднага имаше оплаквания за неправилната работа на AI. Програмата не разпозна добре сарказма и например коментарът: „това е проклета публикация“ се счита за положителен.
Пример за услуга. Изображение: Live Dune
За по-нататъшно обучение на системата създателите предоставихаклиентите възможност да коригират оценката на "Олга Станиславовна". Коригираните данни се изпращат към системата и се използват за прецизиране на алгоритмите. Всъщност невронната мрежа използва повече от 500 хиляди записа за обучение.
Програмистите казват, че най-трудно билонаучи "Олга Станиславовна" да идентифицира иронията и сарказма. За тази цел в невронната мрежа бяха допълнително заредени учебни материали - речници на жаргон и нецензурни думи. И, разбира се, тренирайте върху реални прегледи с обратна връзка от потребители на AI.
"Олга Станиславовна" има най-подходящотолексиката на съвременния руски жаргон - езикът, използван в социалните мрежи. Около 20 милиона коментара „преминаха“ през невронната мрежа само във VKontakte. Разработчиците планират да използват натрупаните от системата данни за изучаване на руски език заедно с филолози.
Заемки, съкращения иразговорно-разговорните елементи се използват масово от нас, когато общуваме в мрежата. Речниците, фиксиращи езиковата норма, винаги са изоставали от живата реч, но появата на такава невронна мрежа може да помогне на филолозите да проследяват по-точно развитието на езика.
Мария Рогожина, филолог
Прочетете още:
Скоро слънчева буря ще удари Земята: материалът лети със скорост от 800 km / s
Учени заснеха странно създание с пипала, което сбъркаха с цвете
Русия напуска МКС: какво ще се случи сега и защо поддръжката на станцията е под заплаха