자연어 처리 란 무엇입니까?
자연어 텍스트 처리 - 일반 방향
인공 지능에 적용된 분석언어를 이해하는 것을 의미하고 합성은 글을 읽고 쓰는 것을 의미합니다. 이러한 문제를 해결하는 것은 컴퓨터와 사람 사이에보다 편리한 형태의 상호 작용을 만드는 것을 의미합니다.
목표 및 한계
이론적으로 자연어의 구성컴퓨터 인터페이스는 매우 매력적인 대상입니다. 제한된 "큐브 세계"로 작업하고 제한된 어휘를 사용하는 SHRDLU와 같은 초기 시스템은 매우 좋아 보였고 제작자에게 영감을주었습니다. 그러나 이러한 시스템이 현실 세계의 복잡성과 모호함에 직면했을 때 낙관주의는 빠르게 줄어 들었습니다.
자연어 이해가 때때로 고려됩니다.살아있는 언어를 인식하려면 주변 세계에 대한 시스템에 대한 방대한 지식과 상호 작용할 수있는 능력이 필요하기 때문에 AI는 완전한 작업입니다. "이해"라는 단어의 의미에 대한 정의 자체가 인공 지능의 주요 작업 중 하나입니다.
러시아어 이해의 어려움
이해의 질은 언어, 국가 문화, 대담 자 자신 등 여러 요인에 따라 달라집니다. 다음은 텍스트 이해 시스템이 직면 한 어려움의 몇 가지 예입니다.
- 비유 표현의 어려움(인식,대명사 사용이 의미하는 것): “우리는 원숭이들이 배고프기 때문에 바나나를 주었다”와 “우리는 원숭이들이 너무 익었기 때문에 바나나를 주었다”라는 문장은 구문 구조가 유사합니다. 그 중 하나에는 대명사그들은원숭이를 의미하고 다른 것은 바나나를 의미합니다. 올바른 이해는 바나나와 원숭이가 무엇인지에 대한 컴퓨터의 지식에 달려 있습니다.
- 단어의 자유로운 순서는 "존재가 의식을 결정한다"라는 문구의 완전히 다른 해석으로 이어질 수 있습니다. 무엇을 결정 하는가?
- 러시아어에서 자유 주문은 개발 된 형태, 공식 단어 및 구두점으로 보상되지만 대부분의 경우 컴퓨터에 추가 문제가 발생합니다.
- 예를 들어 동사 "Fifty ruble"과 같이 신조어는 연설에서 만날 수 있습니다. 즉, 50 루블을 보냅니다. 시스템은 이러한 경우를 오타와 구분하고 올바르게 이해할 수 있어야합니다.
- 동음이의어에 대한 올바른 이해는 또 다른 문제입니다. 음성 인식에서는 무엇보다도 음성 동음이의어 문제가 발생합니다. '황야의 회색늑대'라는 문구에서숲빨간 머리를 만났어여우»강조 표시된 단어는 동일한 방식으로 들립니다.누가 귀머거리이고 누가 적색인지에 대한 지식은 필수 불가결합니다 (여우는 붉은 색일 수 있고 숲은 귀머거리가 될 수 있다는 점을 제외하고는 숲도 붉은 색일 수 있습니다 (이 경우 특징은 숲의 단풍의 주된 색을 나타냄). ), 여우는 귀머거리가 될 수 있으며, 이는 이전 버전에서 발생하는 추가 문제를 야기하지만 형태에 의해 부분적으로 보상되지만이 문장의 형용사는 성별이 분명히 다릅니다).
인기있는 작업 :
- 음성 인식
- 텍스트 분석 :
- 정보 추출,
- 정보 검색,
- 진술 분석,
- 텍스트의 감정 분석,
- 질문-답변 시스템.
- 텍스트 생성
- 음성 합성
일반적 분류:
- 텍스트 분류
- 문자 시퀀스 분류 :
- 명명 된 엔티티 인식,
- 단어의 품사 결정.
- 구문 인식
- 텍스트에서 정보 추출
- 구문 주석
- 시맨틱 주석
- 텍스트 생성 :
- 인식 된 음성을 기반으로 텍스트 생성,
- 기계 번역,
- 텍스트의 일반화.
AI 작성은 직장에서 어떻게 사용합니까?
- 워싱턴 포스트
2016 년 8 월, The Washington Post는 처음으로리우데 자네이루 올림픽에 대한 짧은 뉴스를 썼던 Heliograf 봇을 사용하기 시작했습니다. "Heliograf"의 성능은 인상적이었습니다. 봇은 편집자가 작업을 설정하는 시간보다 더 빨리 뉴스를 생성했으며 독자는 자동 메모와 손으로 쓴 메모를 구분할 수 없었습니다.
- 블룸버그
오늘 모든 Bloomberg 뉴스의 약 30 %Cyborg 모듈을 사용하여 생성됩니다. 이벤트에 대해 무슨 일이 일어 났는지, 언제, 어디서, 누구와, 누가, 어떻게 댓글을 남겼는지 템플릿에 따라 생성합니다. 이렇게하면 기자의 비용이 절약되지만 기자 없이는 할 수 없습니다. 사이보그는 고급 AI가 아닌 자동화 시스템입니다.
- 로이터 통신
국제 기관인 Reuters는 소프트웨어를 사용합니다.뉴스 추적기. 통계 및 평판 기준에 따라 트위터 스토리를 평가하는 AI 예측 도구입니다. 이 봇은 매일 7 억 개 이상의 트윗을 확인합니다.
- 수호자
처음으로 인공 지능은뉴스 노트와 분석 기사를 생성하기 시작했습니다. 2019 년 1 월, The Guardian은 인공 지능 ReporterMate가 쓴 첫 번째 이야기를 발표했습니다. 호주의 여러 당사자가 모금 한 기부 금액에 전념했습니다. 텍스트 외에도 AI는 훈련 캠프 결과를 기반으로 그래프를 생성하고 게임 순위를 매겼습니다.
더 읽어보기 :
세계 최초의 정확한지도가 만들어졌습니다. 다른 사람들에게 무슨 문제가 있습니까?
지구상에서 가장 폭풍우가 많은 곳 : 드레이크 항로가 남극 대륙으로가는 가장 위험한 경로 인 이유
새로운 우라늄 화합물, 비정상 전도율 기록 갱신