자연어 : 우리가 평소에 말하는 음성이나 텍스트를 의미한다. 자연어 처리(Natural Language Processing, NLP) : 음성이나 텍스트를 컴퓨터가 인식하고 처리하는 것이다. 자연어 처리를 위한 텍스트 전처리 과정 1. 텍스트의 토큰화 토큰(token) : 입력할 텍스트를 단어별, 문장별, 형태소별로 나눌 수 있는데, 이렇게 작게 나누어진 하나의 단위 토큰화(tokenization) : 입력된 텍스트를 잘게 나누는 과정 ▪ text_to_word_sequence() : 단어 단위로 쉽게 나눌 수 있다. from tensorflow.keras.preprocessing.text import text_to_word_sequence "해보지 않으면 해낼 수 없다" 라는 텍스트를 전처리하겠다. ▪..
