Mikä on luonnollinen kielenkäsittely?
Luonnollisen kielen tekstinkäsittely – yleinen suunta
Analyysi sovellettiin tekoälyyntarkoittaa kielen ymmärtämistä ja synteesi tarkoittaa lukutaidon luomista. Näiden ongelmien ratkaiseminen tarkoittaa helpomman vuorovaikutustavan luomista tietokoneen ja henkilön välille.
Tavoitteet ja rajoitukset
Teoreettisesti luonnollisen kielen rakentaminenkäyttöliittymä tietokoneille on erittäin houkutteleva kohde. Varhaiset järjestelmät, kuten SHRDLU, jotka työskentelivät rajoitetun "kuutimaailman" kanssa ja käyttävät rajoitettua sanastoa, näyttivät erittäin hyviltä ja inspiroivat niiden luojia. Optimismi kuitenkin väheni nopeasti, kun nämä järjestelmät joutuivat kohtaamaan todellisen maailman monimutkaisuuden ja epäselvyyden.
Joskus harkitaan luonnollisen kielen ymmärtämistäTekoäly on täydellinen tehtävä, koska elävän kielen tunnistaminen vaatii valtavan järjestelmän tuntemuksen ympäröivästä maailmasta ja kyvyn olla vuorovaikutuksessa sen kanssa. Pelkästään sanan "ymmärrä" merkityksen määrittely on yksi tekoälyn päätehtävistä.
Venäjän kielen ymmärtämisen vaikeudet
Ymmärtämisen laatu riippuu monista tekijöistä: kielestä, kansallisesta kulttuurista, keskustelukumppanilta itseltään jne. Nämä ovat joitain esimerkkejä vaikeuksista, joita tekstinkäsittelyjärjestelmillä on.
- Vaikeudet anaforien paljastamisessa (tunnistaminen,mitä tarkoitetaan käytettäessä pronomineja): lauseet "Annoimme banaanit apinoille, koska he olivat nälkäisiä" ja "Annoimme banaanit apinoille, koska ne olivat ylikypsiä" ovat syntaktisesti rakenteeltaan samanlaisia. Yhdessä niistä pronominihe ovatviittaa apinoihin ja toisessa banaaneihin. Oikea ymmärtäminen riippuu tietokoneen tiedosta siitä, mitä banaanit ja apinat voivat olla.
- Sanojen vapaa järjestys voi johtaa täysin erilaiseen tulkintaan lauseesta: "Olemus määrää tietoisuuden" - mikä määrittää mitä?
- Venäjän kielellä ilmainen järjestys kompensoidaan kehittyneellä morfologialla, virallisilla sanoilla ja välimerkkeillä, mutta useimmissa tapauksissa tämä aiheuttaa tietokoneelle lisäongelman.
- Neologismia voi esiintyä puheessa, esimerkiksi verbi "Viisikymmentä ruplaa" - lähetä 50 ruplaa. Järjestelmän pitäisi pystyä erottamaan tällaiset tapaukset kirjoitusvirheistä ja ymmärtämään ne oikein.
- Homonyymien oikea ymmärtäminen on toinen ongelma. Muun muassa puheentunnistuksessa nousee esiin foneettisten homonyymien ongelma. Lauseessa "Harmaa susi erämaassametsätapasi punapäänkettu»Korostetut sanat kuullaan samalla tavalla ja ilmantieto siitä, kuka on kuuro ja kuka punainen, on välttämätöntä (paitsi että kettu voi olla punainen ja metsä voi olla kuuro, metsä voi olla myös punainen (ominaisuus, tässä tapauksessa, joka merkitsee metsän lehtien hallitsevaa väriä) ), kun taas kettu voi olla kuuro, mikä aiheuttaa lisäongelman edellisestä, vaikka morfologia kompensoi sen osittain - tämän lauseen adjektiiveilla on selvästi erilainen sukupuoli).
Suositut tehtävät:
- Puheentunnistus
- Tekstianalyysi:
- Tietojen poiminta,
- Tiedonhaku,
- Lausuntojen analyysi,
- Tekstin mielialan analyysi,
- Kysymys-vastaus-järjestelmät.
- Luodaan tekstiä
- Puhesynteesi
Yleinen luokittelu:
- Tekstien luokittelu
- Merkkijonojen luokitus:
- Nimetty kokonaisuuden tunnistus,
- Sanan puheosien määrittäminen.
- Lausetunnistus
- Tietojen poimiminen tekstistä
- Syntaktinen merkintä
- Semanttinen merkintä
- Luodaan tekstiä:
- Tunnistettuun puheeseen perustuvan tekstin luominen,
- Konekäännös,
- Tekstin yleistäminen.
Kuinka tekoälyn kirjoittaminen käyttää sitä työssä?
- Washington Post
Elokuussa 2016 The Washington Post ensimmäistä kertaaalkoi käyttää botti Heliografia, joka kirjoitti lyhyitä uutisia Rio de Janeiron olympialaisista. "Heliograf" -esitys oli vaikuttava: botti tuotti uutisia nopeammin kuin editorilla oli aikaa asettaa tehtävä, eikä lukijat pystyneet erottamaan automaattisia muistiinpanoja käsinkirjoitetuista.
- Bloomberg
Noin 30% kaikista Bloomberg-uutisista tänäänluodaan Cyborg-moduulin avulla. Se tuottaa ne mallin mukaan: mitä tapahtui, milloin, missä, kenen kanssa, kuka ja miten kommentoi tapahtumaa. Tämä säästää toimittajien kustannuksia, mutta et voi tehdä ilman niitä. Cyborg on vain automaatiojärjestelmä, ei edistyksellinen tekoäly.
- Reuters
Kansainvälinen toimisto Reuters käyttää ohjelmistojaUutiset Tracer. Se on tekoälyn ennakointityökalu, joka arvioi Twitter-tarinoita tilastollisten ja mainekriteerien perusteella. Botti tarkistaa yli 700 miljoonaa twiittiä päivittäin.
- Huoltaja
Ensimmäistä kertaa tekoäly on mennyt pidemmälleuutiskirjeitä ja alkoi tuottaa analyyttisiä artikkeleita. Tammikuussa 2019 The Guardian julkaisi ensimmäisen tekoälyn kirjoittaman tarinan ReporterMate. Se oli omistettu Australian eri puolueiden keräämien lahjoitusten määrälle. Tekoäly tuotti tekstin lisäksi kaavioita ja luokitti pelit leirin tulosten perusteella.
Lue lisää:
Ensimmäinen tarkka maailmankartta luotiin. Mitä vikaa kaikilla muilla on?
Myrskyisin paikka maan päällä: miksi Drake Passage on vaarallisin reitti Etelämantereelle
Uusi uraaniyhdiste rikkoo ennätyksen poikkeavan johtavuuden suhteen