NLTK(Natural Language Toolkit)는 인간 언어 데이터를 처리하기 위한 다양한 도구와 리소스를 제공하는 자연어 처리(NLP) 분야에서 인기 있는 라이브러리입니다. NLP의 기본 작업 중 하나는 텍스트를 개별 단어 또는 토큰으로 분할하는 것과 관련된 토큰화입니다. NLTK는 토큰화를 위한 여러 가지 방법과 기능을 제공합니다.