-
네이버 지식인의 질문을 카테고리화 하기 위한 모델 제작
- [‘교육/학문’ , ‘컴퓨터/통신’, ‘엔터테인먼트’, ‘생활/경제’, ‘여행’, ‘스포츠’, ‘쇼핑’]
-
training data : 한겨레 카테고리별 기사 데이터
-
제가 training data를 기사 데이터로 쓴 이유는 기존의 네이버 지식인 질문 데이터는 문법, 띄어쓰기, 특수문자 등 데이터 전처리에 있어서 어려움이 있어 한겨레 기사 데이터를 training data로 하기로 하였습니다
-
크롤링을 통하여 데이터를 얻었습니다 : www.hani.co.kr/
-
-
Kor2vec 을 이용한 형테소 임베딩
- 기존의 word2vec을 수정한 한국어에 맞는 워드 임베딩 방법
-
CNN 모델을 활용한 문장 카테고리 분류
https://arxiv.org/pdf/1408.5882.pdf http://kiise.or.kr/e_journal/2018/5/JOK/pdf/04.pdf
- python, crawling, keras, tensorflow