InfoGrab DocsInfoGrab Docs

Token Splitter 노드 문서

Token Splitter 노드는 먼저 텍스트를 BPE 토큰으로 변환한 다음, 이 토큰을 청크로 분할하고 단일 청크 내의 토큰을 다시 텍스트로 변환하는 방식으로 원시 텍스트 문자열을 분할합니다. 이 페이지에서는 Token Splitter 노드의 노드 매개변수와 추가 참고 자료 링크를 확인할 수 있습니다. 참고 이 섹션의 상세 내용은 n8n 공식 문서 를 참조하세요. 노드 매개변수 # Chunk Size : 각 청크에 포함할 문자 수를 입력합니다. Chunk Overlap : 청크 간에 얼마나 겹치게 할지 입력합니다. 템플릿 및 예제 # Token Splitter 노드 문서 통합 템플릿 둘러보기 또는 모든 템플릿 검색 관련 자료 # 이 서비스에 대한 자세한 내용은 LangChain의 토큰 문서 및 LangChain의 텍스트 분할기 문서 를 참조하세요. 참고 이 섹션의 상세 내용은 n8n 공식 문서 를 참조하세요.