Digte, analytisk skrivning og vittigheder: hvordan AI lærte at skrive meningsfuldt

Hvad er naturlig sprogbehandling?

Naturligt sprog tekstbehandling - generel retning

kunstig intelligens og matematisk lingvistik. Det studerer problemerne med computeranalyse og syntese af tekster på naturlige sprog.

Analyse anvendt på kunstig intelligensbetyder forståelse af sproget, og syntese betyder generering af læsefærdige tekster. At løse disse problemer betyder at skabe en mere bekvem form for interaktion mellem en computer og en person.

Mål og begrænsninger

Teoretisk set opbygningen af ​​et naturligt sproginterface til computere er et meget attraktivt mål. Tidlige systemer som SHRDLU, der arbejder med en begrænset "terningeverden" og bruger et begrænset ordforråd, så ekstremt godt ud og inspirerede deres skabere. Imidlertid aftog optimismen hurtigt, da disse systemer blev konfronteret med den virkelige verdens kompleksitet og tvetydighed.

Naturlig sprogforståelse betragtes undertidenAI er en komplet opgave, fordi anerkendelse af et levende sprog kræver en enorm viden om systemet om den omkringliggende verden og evnen til at interagere med det. Selve definitionen af ​​betydningen af ​​ordet "forstå" er en af ​​de vigtigste opgaver for kunstig intelligens.

Vanskeligheder med at forstå det russiske sprog

Kvaliteten af ​​forståelse afhænger af mange faktorer: af sproget, af den nationale kultur, af samtalepartneren selv osv. Dette er nogle eksempler på de vanskeligheder, som tekstforståelsessystemer står over for.

  • Vanskeligheder med at afsløre anaforer (genkendelse,hvad der menes med brugen af ​​pronominer): sætningerne "Vi gav bananerne til aberne, fordi de var sultne" og "Vi gav bananerne til aberne, fordi de var overmodne" ligner hinanden i syntaktisk struktur. I et af dem pronomenetde erhenviser til aber, og i en anden til bananer. Korrekt forståelse afhænger af computerens viden om, hvad bananer og aber kan være.
  • Den frie rækkefølge af ord kan føre til en helt anden fortolkning af sætningen: "At være bestemmer bevidsthed" - hvad bestemmer hvad?
  • På russisk kompenseres fri orden med en udviklet morfologi, officielle ord og tegnsætningstegn, men i de fleste tilfælde udgør dette et yderligere problem for en computer.
  • Neologismer kan ses i tale, for eksempel verbet "Fifty ruble" - det vil sige sende 50 rubler. Systemet skal kunne skelne sådanne tilfælde fra typografier og forstå dem korrekt.
  • Korrekt forståelse af homonymer er et andet problem. Inden for talegenkendelse opstår blandt andet problemet med fonetiske homonymer. I sætningen ”Den grå ulv i vildmarkenSkovmødte en rødhåretRæv»Fremhævede ord høres på samme måde og udenviden om, hvem der er døv og hvem der er rød, er uundværlig (bortset fra at ræven kan være rød og skoven kan være døv, skoven kan også være rød (en egenskab, i dette tilfælde, der angiver den dominerende farve på løvet i skoven ), mens ræven kan være døv, hvilket giver anledning til et yderligere problem, der stammer fra den foregående, skønt den delvist kompenseres af morfologi - adjektiverne i denne sætning er klart forskellige i køn).

Populære opgaver:

  • Tale genkendelse
  • Tekstanalyse:
  • Udvinding af information,
  • Informationssøgning,
  • Analyse af udsagn,
  • Sentimentanalyse af teksten,
  • Spørgsmål-svar-systemer.
  • Genererer tekst
  • Talesyntese

Generel klassificering:

  • Kategorisering af tekster
  • Klassificering af tegnsekvenser:
  • Navngivet enhedsgenkendelse,
  • Bestemmelse af ordets tale.
  • Sætningsgenkendelse
  • Uddrag af information fra tekst
  • Syntaktisk kommentar
  • Semantisk kommentar
  • Genererer tekst:
  • Generering af tekst baseret på anerkendt tale,
  • Maskinoversættelse,
  • Generalisering af teksten.

Hvordan bruger jeg at skrive AI på arbejdspladsen?

  • Washington-stillingen

I august 2016 The Washington Post for første gangbegyndte at bruge bot Heliograf, som skrev korte nyheder om de olympiske lege i Rio de Janeiro. Opførelsen af ​​"Heliograf" var imponerende: bot genererede nyheder hurtigere end redaktøren havde tid til at indstille opgaven, og læserne kunne ikke skelne automatiske noter fra håndskrevne.

  • Bloomberg

Cirka 30% af alle nyheder fra Bloomberg i dagoprettes ved hjælp af Cyborg-modulet. Det genererer dem i henhold til skabelonen: hvad der skete, hvornår, hvor, med hvem, hvem og hvordan kommenterede begivenheden. Dette sparer journalister omkostninger, men du kan ikke undvære dem. Cyborg er bare et automatiseringssystem, ikke et avanceret AI.

  • Reuters

Det internationale agentur Reuters bruger softwareNyheder Tracer. Det er et AI-forudsigelsesværktøj, der evaluerer Twitter-historier baseret på statistiske kriterier og omdømmekriterier. Bot kontrollerer over 700 millioner tweets hver dag.

  • Værgen

For første gang er kunstig intelligens gået ud overnyhedsnotater og begyndte at generere analytiske artikler. I januar 2019 offentliggjorde The Guardian den første historie skrevet af den kunstige intelligens ReporterMate. Det var dedikeret til mængden af ​​donationer indsamlet af forskellige parter i Australien. Ud over teksten genererede AI grafer og rangerede spillet baseret på resultaterne af træningslejren.

Læs mere:

Det første nøjagtige kort over verden blev oprettet. Hvad er der galt med alle andre?

Det stormigste sted på jorden: hvorfor Drake Passage er den farligste rute til Antarktis

Ny uranforbindelse slår rekord for unormal ledningsevne