Doğal dil işleme nedir?
Doğal dilde metin işleme—genel yön
Yapay zekaya uygulanan analizdili anlamak anlamına gelir ve sentez, okuryazar metin üretmek anlamına gelir. Bu sorunları çözmek, bir bilgisayar ve bir kişi arasında daha uygun bir etkileşim biçimi oluşturmak anlamına gelecektir.
Hedefler ve Sınırlamalar
Teorik olarak, doğal bir dilin inşasıbilgisayarlar için arayüz çok çekici bir hedeftir. Sınırlı bir "küp dünya" ile çalışan ve sınırlı bir kelime dağarcığı kullanan SHRDLU gibi ilk sistemler, yaratıcılarına ilham vererek son derece iyi görünüyordu. Ancak, bu sistemler gerçek dünyanın karmaşıklığı ve belirsizliğiyle karşı karşıya kalınca iyimserlik hızla azaldı.
Doğal dil anlama bazen dikkate alınırYapay zeka eksiksiz bir görevdir, çünkü yaşayan bir dilin tanınması, çevreleyen dünya hakkında büyük bir sistem bilgisi ve onunla etkileşim yeteneği gerektirir. "Anlamak" kelimesinin anlamının tam olarak tanımı, yapay zekanın temel görevlerinden biridir.
Rus dilini anlamada zorluklar
Anlama kalitesi birçok faktöre bağlıdır: dilden, ulusal kültürden, muhatabın kendisinden vb. Bunlar, metin anlama sistemlerinin karşılaştığı zorlukların bazı örnekleridir.
- Anaforları ortaya çıkarmadaki zorluklar (tanıma,zamir kullanımından kastedilen): "Aç oldukları için muzları maymunlara verdik" ve "Olgun oldukları için muzları maymunlara verdik" cümleleri sözdizimsel yapı olarak benzerdir. Bunlardan birinde zamironlarmaymunları, diğerinde ise muzları ifade eder. Doğru anlama, bilgisayarın muz ve maymunların ne olabileceğine dair bilgisine bağlıdır.
- Serbest kelime düzeni, şu cümlenin tamamen farklı bir yorumlanmasına yol açabilir: "Varlık bilinci belirler" - neyi ne belirler?
- Rusça'da serbest düzen, gelişmiş bir morfoloji, resmi sözcükler ve noktalama işaretleri ile telafi edilir, ancak çoğu durumda bu, bir bilgisayar için ek bir sorun teşkil eder.
- Neologizm konuşmada karşılaşılabilir, örneğin "Elli ruble" fiili - yani 50 ruble gönderin. Sistem bu tür durumları yazım hatalarından ayırt edebilmeli ve bunları doğru anlayabilmelidir.
- Eş anlamlıların doğru anlaşılması başka bir sorundur. Konuşma tanımada, diğerlerinin yanı sıra, fonetik eş anlamlılar sorunu ortaya çıkar. “Vahşi doğada gri kurt” ifadesindeormankızıl saçlı biriyle tanıştımtilki»Vurgulanan kelimeler aynı şekilde ve duyulmadan duyulurKimin sağır ve kimin kırmızı olduğu bilgisi vazgeçilmezdir (tilki kırmızı olabilir ve ormanın sağır olabilir, orman da kırmızı olabilir (bu durumda ormandaki yeşilliklerin baskın rengini belirten bir özellik) ), tilki sağır olabilir, bu da bir öncekinden kaynaklanan ek bir soruna yol açar, ancak kısmen morfoloji ile telafi edilir - bu cümledeki sıfatlar açıkça farklı bir cinsiyete sahiptir).
Popüler görevler:
- Konuşma tanıma
- Metin analizi:
- Bilginin çıkarılması,
- Bilgi arama,
- İfadelerin analizi,
- Metnin duygu analizi,
- Soru-cevap sistemleri.
- Metin oluşturma
- Konuşma sentezi
Genel sınıflandırma:
- Metinlerin sınıflandırılması
- Karakter dizilerinin sınıflandırılması:
- Adlandırılmış Varlık Tanıma,
- Kelimelerin konuşma bölümlerinin belirlenmesi.
- Cümle Tanıma
- Metinden bilgi çıkarma
- Sözdizimsel açıklama
- Anlamsal açıklama
- Metin oluşturma:
- Tanınan konuşmaya dayalı metin oluşturma,
- Makine çevirisi,
- Metnin genelleştirilmesi.
Yapay zeka yazmak onu işte nasıl kullanır?
- Washington post
Ağustos 2016'da Washington Post ilk kezRio de Janeiro'daki Olimpiyat Oyunları hakkında kısa haberler yazan Heliograf botunu kullanmaya başladı. "Heliograf"ın performansı etkileyiciydi: bot, editörün görevi belirlemeye vaktinden daha hızlı haber üretiyordu ve okuyucular otomatik notları elle yazılmış notlardan ayırt edemiyorlardı.
- Bloomberg
Bugün tüm Bloomberg haberlerinin yaklaşık %30'uCyborg modülü kullanılarak oluşturulur. Bunları şablona göre oluşturur: olay hakkında ne oldu, ne zaman, nerede, kiminle, kim ve nasıl yorumlandı. Bu, muhabirler için maliyet tasarrufu sağlar, ancak onlar olmadan yapamazsınız. Cyborg, gelişmiş bir yapay zeka değil, yalnızca bir otomasyon sistemidir.
- Reuters
Uluslararası ajans Reuters yazılım kullanıyorNews Tracer. Twitter hikayelerini istatistiksel ve itibar kriterlerine göre değerlendiren bir yapay zeka tahmin aracıdır. Bot, her gün 700 milyondan fazla tweet'i kontrol ediyor.
- Gardiyan
Yapay zeka ilk kez ötesine geçtihaber notları ve analitik makaleler üretmeye başladı. Ocak 2019'da The Guardian, yapay zeka ReporterMate tarafından yazılan ilk hikayeyi yayınladı. Avustralya'da çeşitli taraflarca toplanan bağışların miktarına ithaf edilmiştir. Metne ek olarak, AI grafikler oluşturdu ve oyunları eğitim kampının sonuçlarına göre sıraladı.
Daha fazla oku:
Dünyanın ilk doğru haritası oluşturuldu. Herkesin nesi var?
Dünyanın en fırtınalı yeri: Drake Passage neden Antarktika'ya giden en tehlikeli yol
Yeni uranyum bileşiği anormal iletkenlik rekorunu kırdı