ما هي معالجة اللغة الطبيعية؟
Обработка текстов на естественном языке — общее направление
التحليل المطبق على الذكاء الاصطناعييعني فهم اللغة ، والتركيب يعني توليد نص متعلم. يعني حل هذه المشكلات إنشاء شكل أكثر ملاءمة للتفاعل بين الكمبيوتر والشخص.
الأهداف والقيود
من الناحية النظرية ، بناء لغة طبيعيةواجهة أجهزة الكمبيوتر هدف جذاب للغاية. بدت الأنظمة المبكرة مثل SHRDLU ، التي تعمل مع "عالم مكعب" محدود وتستخدم مفردات محدودة ، جيدة للغاية ، مما يلهم مبدعيها. ومع ذلك ، سرعان ما تضاءل التفاؤل عندما واجهت هذه الأنظمة تعقيد وغموض العالم الحقيقي.
يُنظر أحيانًا إلى فهم اللغة الطبيعيةيعد الذكاء الاصطناعي مهمة كاملة ، لأن التعرف على لغة حية يتطلب معرفة كبيرة بالنظام حول العالم المحيط والقدرة على التفاعل معه. يعد تعريف معنى كلمة "فهم" أحد المهام الرئيسية للذكاء الاصطناعي.
صعوبات في فهم اللغة الروسية
تعتمد جودة الفهم على العديد من العوامل: على اللغة والثقافة الوطنية والمحاور نفسه وما إلى ذلك. هذه بعض الأمثلة على الصعوبات التي تواجهها أنظمة فهم النص.
- Сложности с раскрытием анафор (распознаванием, что имеется в виду при использовании местоимений): предложения «Мы отдали бананы обезьянам, потому что они были голодные» и «Мы отдали бананы обезьянам, потому что они были перезрелые» похожи по синтаксической структуре. В одном из них местоимение هم انهم относится к обезьянам, а в другом — к бананам. Правильное понимание зависит от знаний компьютера, какими могут быть бананы и обезьяны.
- يمكن أن يؤدي الترتيب الحر للكلمات إلى تفسير مختلف تمامًا لعبارة "الوجود يحدد الوعي" - ما الذي يحدد ماذا؟
- في اللغة الروسية ، يتم تعويض النظام الحر من خلال مورفولوجيا مطورة وكلمات رسمية وعلامات ترقيم ، ولكن في معظم الحالات يمثل هذا مشكلة إضافية لجهاز الكمبيوتر.
- يمكن العثور على الكلمات الجديدة في الكلام ، على سبيل المثال ، الفعل "خمسون روبل" - أي إرسال 50 روبل. يجب أن يكون النظام قادرًا على التمييز بين هذه الحالات والأخطاء المطبعية وفهمها بشكل صحيح.
- Правильное понимание омонимов — ещё одна проблема. При распознавании речи, помимо прочих, возникает проблема фонетических омонимов. Во фразе «Серый волк в глухом غابة встретил рыжую الثعلب»تسمع الكلمات المميزة بنفس الطريقة وبدونلا غنى عن معرفة من هو أصم ومن هو أحمر (باستثناء أن الثعلب يمكن أن يكون أحمر والغابة صماء ، يمكن أن تكون الغابة حمراء أيضًا (سمة ، في هذه الحالة ، تدل على اللون السائد لأوراق الشجر في الغابة ) ، في حين أن الثعلب قد يكون أصمًا ، مما يؤدي إلى مشكلة إضافية تنشأ عن المشكلة السابقة ، على الرغم من أنه يتم تعويضها جزئيًا عن طريق التشكل - الصفات في هذه الجملة تختلف بوضوح في الجنس).
المهام الشعبية:
- التعرف على الكلام
- تحليل النص:
- استخراج المعلومات ،
- البحث عن المعلومات ،
- تحليل البيانات ،
- تحليل المشاعر للنص ،
- أنظمة الأسئلة والأجوبة.
- توليد النص
- اصطناع الكلام
التصنيف العام:
- تصنيف النصوص
- تصنيف تسلسل الأحرف:
- التعرف على الكيان المحدد ،
- تحديد أجزاء الكلام من الكلمات.
- التعرف على العبارة
- استخراج المعلومات من النص
- شرح نحوي
- الشرح الدلالي
- توليد النص:
- توليد نص يعتمد على الكلام المعترف به ،
- ترجمة آلية ،
- تعميم النص.
كيف تستخدمه كتابة الذكاء الاصطناعي في العمل؟
- بريد واشنطن
في أغسطس 2016 ، واشنطن بوست لأول مرةبدأ استخدام الروبوت هيليوغراف ، الذي كتب أخبارًا قصيرة عن الألعاب الأولمبية في ريو دي جانيرو. كان أداء "Heliograf" مثيرًا للإعجاب: حيث قام الروبوت بتوليد الأخبار بشكل أسرع مما كان لدى المحرر الوقت الكافي لضبط المهمة ، ولم يتمكن القراء من التمييز بين الملاحظات التلقائية والملاحظات المكتوبة بخط اليد.
- بلومبرغ
حوالي 30٪ من أخبار بلومبرج اليوميتم إنشاؤها باستخدام وحدة سايبورغ. يولدها وفقًا للنموذج: ماذا حدث ومتى وأين ومع من وكيف تم التعليق على الحدث. هذا يوفر التكاليف على المراسلين ، لكن لا يمكنك الاستغناء عنها. سايبورغ هو مجرد نظام أتمتة ، وليس ذكاءً اصطناعيًا متقدمًا.
- رويترز
الوكالة الدولية رويترز تستخدم البرمجياتتتبع الأخبار. إنها أداة تنبؤية بالذكاء الاصطناعي تقوم بتقييم قصص تويتر بناءً على المعايير الإحصائية ومعايير السمعة. يتحقق الروبوت من أكثر من 700 مليون تغريدة يوميًا.
- الحارس
لأول مرة ، تجاوز الذكاء الاصطناعيالملاحظات الإخبارية وبدأت في إنشاء مقالات تحليلية. في يناير 2019 ، نشرت صحيفة The Guardian أول قصة كتبها مراسل الذكاء الاصطناعي ReporterMate. تم تخصيصه لمقدار التبرعات التي تم جمعها من قبل مختلف الأطراف في أستراليا. بالإضافة إلى النص ، أنشأ الذكاء الاصطناعي رسومًا بيانية وصنف الألعاب بناءً على نتائج المعسكر التدريبي.
قراءة المزيد:
تم إنشاء أول خريطة دقيقة للعالم. ما هو الخطأ مع أي شخص آخر؟
أعنف مكان على وجه الأرض: لماذا يعتبر ممر دريك أخطر طريق إلى القارة القطبية الجنوبية
مركب اليورانيوم الجديد يحطم الرقم القياسي في التوصيل الشاذ