1. 자연어 분석 단계
1) 화용론 : 화자의 진짜 의도
2) 의미론 : 문장의 의미
* 특정 도메인에 대한 지식 -> 의미 사전이 필요함
*같은 의미 표현에 대한 정규화
다만 대화 상황에 따라 그 의도가 달라질 수 있음! 따라서 대화 상황에 대한 지식이 필요함
3)구문론: 문장의 구조
* 형태소 : 뜻을 가지는 가장 작은 말의 단위
2. 자연어의 특징
1) 합성성
위의 예시 처럼 명사 구문이 하나의 명사부분에 들어갈 수 있다는 점에서 합성성을 가짐
2) 비합성성
관용적인 표현으로 구성이 되는 경우가 있다. 또한 '좋은 날'같은 경우는 조합으로 생각 하면 안됨.
3) 생략
의미를 내포하고 있거나 관용적으로 쓰이기 때문에 생략이 되는 경우가 많음
4) 모호성과 불확실성
아이유 노래 라고 했을 때 두가지로 해석할 수 있으며, 사람에 따라 기준에 따라 달라지는 '불확실성'에 대한 문제가 있음.
'AI Researcher가 될끄야! > 자연어처리' 카테고리의 다른 글
Conversational AI _ 챗봇이 대화를 하려면? (0) | 2022.01.18 |
---|---|
자연어의 의미 이해 방법 Semantics (0) | 2022.01.03 |
자연어 이해 기술이란? (NLU) (0) | 2022.01.03 |
[파이썬] 경로를 지정하는 모듈 (os 모듈) (0) | 2021.01.12 |
[자연어 처리] 정규표현 (0) | 2021.01.12 |
댓글