AI Study/자연어처리
-
고급 자연어 처리 - 오리엔테이션AI Study/자연어처리 2022. 3. 8. 11:18
Aspects of NL 1) 시간과 공간에 따라서 우리가 처리해야할 언어가 다르다. 2) 포맷에 따라 메시지가 다르다. 3) 나이에 따라 다르다. 4) Sender와 Receiver에 따라 다르다. 자연어 = (문화, 경험, 지식, .... ) *총체적인 이해가 중요 심벌만 잘 다루면 되지않는다. 자연어 처리 역사 1) 튜링이 컴퓨터 구조 제안(1940) 2) 규칙기반 AI (~1980) 체스 프로그램, 번역기등 시도 언어는 기호화 하는 순간 대부분의 정보가 사라진다. 사람은 디코딩하여 복구하여 이해한다.(같은 정보를 가진 사람은 말이 통한다.) 3) Data Driven AI (1970~) 과거에는 컴퓨터파워와 데이터 부족으로 실패함 뉴럴 네트워크, 통계 기반AI(HMM, CRF, SVM)-문제에만 ..