인공지능/자연어 처리

자연어 이해 - 자연어 추론 TASK

이게될까 2024. 4. 4. 21:21
728x90
728x90

목표 - 대표적인 NLU task의 자연어 추론 작업에 대해 이해할 수 있다.

자연어 추론 작업이란

유사도를 통해서 어떻게 저 3개를 결정할 수 있지...? 말이 안되는 말들은 벡터가 반대로 가나...?

 

자연어 추론 NLI 수행 방법

백터 기반의 의미 공간을 만들기 위해 큰 언어 코퍼스를 사용하여 언어의 유사도 구분 가능 -> 통계기반

프레임 - 규칙 기반의 무엇인가

통계 기반 - 어느 정도의 길이가 있어야 된다.

 

시소러스 - 단어 사전

transformation rule - 예외를 잘 규정해놓기!

구문 분석을 통한 트리 구조

 

다양한 기법 - 인간이 만들어 놓은 통계

백터를 압축하기 시작했다.

 

 

딥러닝 기반의 자연어 추론 방법

확실의 정도 - 사람의 주관이 들어가 있다.

자연어 이해 관점에서의 이의제기 -> 문제 해결, 데이터 수집에 대한 좋은 방향 제시

 

자연어 추론 벤치마크 데이터셋

728x90