'타겟인코딩' 태그의 글 목록

[NLP] 텍스트 데이터를 인코딩하는 방법 / NLP에서의 지도학습

-- 본 포스팅은 파이토치로 배우는 자연어 처리 (한빛미디어) 책을 참고해서 작성된 글입니다. 1. 지도학습 지도학습이란 알고리즘에 주입되는 훈련 데이터(샘플)에 레이블(타겟값)이 포함되어 있는 방식을 말한다. 1.1 NLP에서의 지도 학습 문서 분류 시스템을 예시로 든다면, 훈련데이터(샘플)은 문서가 될 것이고, 레이블(타겟)은 범주형 레이블이 될 것이다. 기계번역을 예시로 든다면 훈련데이터(샘플)은 한 언어의 문장, 레이블(타겟)은 다른 언어의 문장이 될 것이다. 1.2 지도학습의 프레임 워크 지도학습의 프레임워크를 그려본다면 아래와 같다. 파라미터는 모델을 규정할때의 가중치를 의미한다. 손실함수는 모델을 통해 구해진 예측된 값이 실제 타겟과 얼마나 가까운지, 먼지를 비교하는 함수인데, 이를 'los..

AI study/자연어 처리 (NLP) 2021.07.16

일	월	화	수	목	금	토
						1
2	3	4	5	6	7	8
9	10	11	12	13	14	15
16	17	18	19	20	21	22
23	24	25	26	27	28

potato's devlog

타겟인코딩 1

티스토리툴바