Backend/NLP
[NLP] 키워드 추출 기법 소개
자연어 처리란 자연어(Natural Language)란 우리가 일상 생활에서 사용하는 언어를 의미한다. 자연어 처리(Natural Language Processing)란 이러한 자연어의 의미를 컴퓨터가 처리할 수 있도록 하는 것이다. 자연어 처리가 사용되는 분야에는 음성 인식, 내용 요약, 번역, 감성 분석, 텍스트 분류, 질의 응답 시스템, 챗봇 등이 있다. 키워드 추출 기법 통계적 특성에 기초한 키워드 추출 Rake, YAKE!, TF-IDF 의미적 측면을 고려한 키워드 추출 KeyBERT TF-IDF TF-IDF는 단어의 빈도와 역 문서 빈도를 사용하여 DTM(문서 단어 행렬)내의 각 단어들마다 중요한 정도를 가중치로 주는 특징 추출 기법이다. TF (단어 빈도) Term Frequency의 약자로..
2022. 3. 13. 20:41