Τι είναι η επεξεργασία φυσικής γλώσσας;
Επεξεργασία κειμένου φυσικής γλώσσας — γενική κατεύθυνση
Ανάλυση που εφαρμόζεται στην τεχνητή νοημοσύνησημαίνει κατανόηση της γλώσσας και σύνθεση σημαίνει δημιουργία εγγράμματου κειμένου. Η επίλυση αυτών των προβλημάτων θα σημαίνει τη δημιουργία μιας πιο βολικής μορφής αλληλεπίδρασης μεταξύ ενός υπολογιστή και ενός ατόμου.
Στόχοι και περιορισμοί
Θεωρητικά, η κατασκευή μιας φυσικής γλώσσαςΗ διεπαφή για υπολογιστές είναι ένας πολύ ελκυστικός στόχος. Τα πρώτα συστήματα όπως το SHRDLU, που συνεργάζονταν με έναν περιορισμένο «κόσμο κύβων» και χρησιμοποιούσαν ένα περιορισμένο λεξιλόγιο, έμοιαζαν εξαιρετικά καλά, εμπνέοντας τους δημιουργούς τους. Ωστόσο, η αισιοδοξία μειώθηκε γρήγορα όταν αυτά τα συστήματα ήρθαν αντιμέτωπα με την πολυπλοκότητα και την ασάφεια του πραγματικού κόσμου.
Μερικές φορές εξετάζεται η κατανόηση της φυσικής γλώσσαςΗ τεχνητή νοημοσύνη είναι μια ολοκληρωμένη εργασία, επειδή η αναγνώριση μιας ζωντανής γλώσσας απαιτεί την τεράστια γνώση του συστήματος για τον κόσμο γύρω του και την ικανότητα αλληλεπίδρασης με αυτήν. Ο ίδιος ο ορισμός της έννοιας της λέξης "καταλαβαίνω" είναι ένα από τα κύρια καθήκοντα της τεχνητής νοημοσύνης.
Δυσκολίες στην κατανόηση της ρωσικής γλώσσας
Η ποιότητα της κατανόησης εξαρτάται από πολλούς παράγοντες: από τη γλώσσα, από τον εθνικό πολιτισμό, από τον ίδιο τον συνομιλητή κ.λπ. Αυτά είναι μερικά παραδείγματα των δυσκολιών που αντιμετωπίζουν τα συστήματα κατανόησης κειμένου.
- Δυσκολίες με την αποκάλυψη αναφορών (αναγνώριση,τι εννοείται με τη χρήση αντωνυμιών): οι προτάσεις «Δώσαμε τις μπανάνες στις μαϊμούδες γιατί πεινούσαν» και «Δώσαμε τις μπανάνες στις μαϊμούδες γιατί ήταν υπερώριμες» είναι παρόμοιες στη συντακτική δομή. Σε ένα από αυτά η αντωνυμίααυτοίαναφέρεται σε πιθήκους και σε άλλον σε μπανάνες. Η σωστή κατανόηση εξαρτάται από τη γνώση του υπολογιστή για το τι μπορεί να είναι οι μπανάνες και οι πίθηκοι.
- Η ελεύθερη σειρά των λέξεων μπορεί να οδηγήσει σε μια εντελώς διαφορετική ερμηνεία της φράσης: «Το είναι καθορίζει τη συνείδηση» - τι καθορίζει τι;
- Στα ρωσικά, η δωρεάν παραγγελία αντισταθμίζεται από μια ανεπτυγμένη μορφολογία, επίσημες λέξεις και σημεία στίξης, αλλά στις περισσότερες περιπτώσεις αυτό παρουσιάζει ένα επιπλέον πρόβλημα για έναν υπολογιστή.
- Νεολογισμοί μπορούν να συναντηθούν στην ομιλία, για παράδειγμα, το ρήμα "Πενήντα ρούβλια" - δηλαδή, στείλτε 50 ρούβλια. Το σύστημα θα πρέπει να μπορεί να διακρίνει τέτοιες περιπτώσεις από τυπογραφικά λάθη και να τις κατανοεί σωστά.
- Η σωστή κατανόηση των ομώνυμων είναι ένα άλλο πρόβλημα. Στην αναγνώριση ομιλίας, μεταξύ άλλων, προκύπτει και το πρόβλημα των φωνητικών ομωνύμων. Στη φράση «Ο γκρίζος λύκος στην ερημιάδάσοςσυνάντησε μια κοκκινομάλλααλεπού»Οι επισημασμένες λέξεις ακούγονται με τον ίδιο τρόπο και χωρίςη γνώση για το ποιος είναι κωφός και ποιος είναι κόκκινος είναι απαραίτητη (εκτός από το ότι η αλεπού μπορεί να είναι κόκκινη και το δάσος μπορεί να είναι κουφή, το δάσος μπορεί επίσης να είναι κόκκινο (ένα χαρακτηριστικό, στην περίπτωση αυτή, δηλώνει το κυρίαρχο χρώμα του φυλλώματος στο δάσος ), ενώ η αλεπού μπορεί να είναι κουφή, γεγονός που δημιουργεί ένα πρόσθετο πρόβλημα που προκύπτει από το προηγούμενο, αν και αντισταθμίζεται εν μέρει από τη μορφολογία - τα επίθετα σε αυτήν την πρόταση είναι σαφώς διαφορετικά στο φύλο).
Δημοφιλείς εργασίες:
- Αναγνώρισης ομιλίας
- Ανάλυση κειμένου:
- Εξαγωγή πληροφοριών,
- Αναζήτηση πληροφοριών,
- Ανάλυση δηλώσεων,
- Ανάλυση συναισθημάτων του κειμένου,
- Συστήματα ερωτήσεων-απαντήσεων.
- Δημιουργία κειμένου
- Σύνθεση λόγου
Γενική ταξινόμηση:
- Κατηγοριοποίηση κειμένων
- Ταξινόμηση ακολουθιών χαρακτήρων:
- Με το όνομα Entity Recognition,
- Προσδιορισμός τμημάτων ομιλίας λέξεων.
- Αναγνώριση φράσης
- Εξαγωγή πληροφοριών από κείμενο
- Συντακτικός σχολιασμός
- Σημασιολογικός σχολιασμός
- Δημιουργία κειμένου:
- Δημιουργία κειμένου με βάση αναγνωρισμένο λόγο,
- Μηχανική μετάφραση,
- Γενίκευση του κειμένου.
Πώς το γράφει AI το χρησιμοποιεί στη δουλειά;
- Η Washington Post
Τον Αύγουστο του 2016, η Washington Postάρχισε να χρησιμοποιεί το bot Heliograf, το οποίο έγραψε σύντομες ειδήσεις για τους Ολυμπιακούς Αγώνες στο Ρίο ντε Τζανέιρο. Η απόδοση του "Heliograf" ήταν εντυπωσιακή: το bot δημιουργούσε ειδήσεις γρηγορότερα από ό, τι ο συντάκτης είχε χρόνο να ορίσει την εργασία και οι αναγνώστες δεν μπορούσαν να διακρίνουν τις αυτόματες σημειώσεις από τις χειρόγραφες.
- Bloomberg
Περίπου το 30% όλων των ειδήσεων του Bloomberg σήμεραδημιουργούνται χρησιμοποιώντας την ενότητα Cyborg. Τα δημιουργεί σύμφωνα με το πρότυπο: τι συνέβη, πότε, πού, με ποιον, ποιος και πώς σχολίασε το γεγονός. Αυτό εξοικονομεί κόστος για τους δημοσιογράφους, αλλά δεν μπορείτε να το κάνετε χωρίς αυτούς. Το Cyborg είναι απλώς ένα σύστημα αυτοματισμού, όχι ένα προηγμένο AI.
- Reuters
Το διεθνές πρακτορείο Reuters χρησιμοποιεί λογισμικόΙχνηλάτης ειδήσεων. Είναι ένα εργαλείο πρόβλεψης AI που αξιολογεί τις ιστορίες του Twitter με βάση στατιστικά κριτήρια και κριτήρια φήμης. Το bot ελέγχει πάνω από 700 εκατομμύρια tweets κάθε μέρα.
- Ο κηδεμόνας
Για πρώτη φορά, η τεχνητή νοημοσύνη έχει ξεπεράσεισημειώσεις ειδήσεων και άρχισαν να δημιουργούν αναλυτικά άρθρα. Τον Ιανουάριο του 2019, ο The Guardian δημοσίευσε την πρώτη ιστορία που γράφτηκε από την τεχνητή νοημοσύνη ReporterMate. Αφιερώθηκε στο ποσό των δωρεών που συλλέχθηκαν από διάφορα μέρη στην Αυστραλία. Εκτός από το κείμενο, η τεχνητή νοημοσύνη δημιουργούσε γραφήματα και ταξινομούσε τα παιχνίδια με βάση τα αποτελέσματα της προπόνησης.
Διαβάστε περισσότερα:
Δημιουργήθηκε ο πρώτος ακριβής χάρτης του κόσμου. Τι συμβαίνει με όλους τους άλλους;
Το πιο θυελλώδες μέρος στη Γη: γιατί το Drake Passage είναι η πιο επικίνδυνη διαδρομή προς την Ανταρκτική
Η νέα ένωση ουρανίου σπάει ρεκόρ για ανώμαλη αγωγιμότητα