InfoGrab DocsInfoGrab Docs

Token Splitter 노드 문서

요약

Token Splitter 노드는 먼저 텍스트를 BPE 토큰으로 변환한 다음, 이 토큰을 청크로 분할하고 단일 청크 내의 토큰을 다시 텍스트로 변환하는 방식으로 원시 텍스트 문자열을 분할합니다. 이 페이지에서는 Token Splitter 노드의 노드 매개변수와 추가 참고 자료 링크를 확인할 수 있습니다.

Token Splitter 노드는 먼저 텍스트를 BPE 토큰으로 변환한 다음, 이 토큰을 청크로 분할하고 단일 청크 내의 토큰을 다시 텍스트로 변환하는 방식으로 원시 텍스트 문자열을 분할합니다.

이 페이지에서는 Token Splitter 노드의 노드 매개변수와 추가 참고 자료 링크를 확인할 수 있습니다.

참고

이 섹션의 상세 내용은 n8n 공식 문서를 참조하세요.

노드 매개변수#

  • Chunk Size: 각 청크에 포함할 문자 수를 입력합니다.
  • Chunk Overlap: 청크 간에 얼마나 겹치게 할지 입력합니다.

템플릿 및 예제#

Token Splitter 노드 문서 통합 템플릿 둘러보기 또는 모든 템플릿 검색

관련 자료#

이 서비스에 대한 자세한 내용은 LangChain의 토큰 문서LangChain의 텍스트 분할기 문서를 참조하세요.

참고

이 섹션의 상세 내용은 n8n 공식 문서를 참조하세요.

Token Splitter 노드 문서

n8n v2.29
원문 보기
요약

Token Splitter 노드는 먼저 텍스트를 BPE 토큰으로 변환한 다음, 이 토큰을 청크로 분할하고 단일 청크 내의 토큰을 다시 텍스트로 변환하는 방식으로 원시 텍스트 문자열을 분할합니다. 이 페이지에서는 Token Splitter 노드의 노드 매개변수와 추가 참고 자료 링크를 확인할 수 있습니다.

Token Splitter 노드는 먼저 텍스트를 BPE 토큰으로 변환한 다음, 이 토큰을 청크로 분할하고 단일 청크 내의 토큰을 다시 텍스트로 변환하는 방식으로 원시 텍스트 문자열을 분할합니다.

이 페이지에서는 Token Splitter 노드의 노드 매개변수와 추가 참고 자료 링크를 확인할 수 있습니다.

참고

이 섹션의 상세 내용은 n8n 공식 문서를 참조하세요.

노드 매개변수#

  • Chunk Size: 각 청크에 포함할 문자 수를 입력합니다.
  • Chunk Overlap: 청크 간에 얼마나 겹치게 할지 입력합니다.

템플릿 및 예제#

Token Splitter 노드 문서 통합 템플릿 둘러보기 또는 모든 템플릿 검색

관련 자료#

이 서비스에 대한 자세한 내용은 LangChain의 토큰 문서LangChain의 텍스트 분할기 문서를 참조하세요.

참고

이 섹션의 상세 내용은 n8n 공식 문서를 참조하세요.