How do I install the Document Chunker skill?

Run npx skillmds@latest add ellmos-ai/document-chunker-5 in your terminal (requires Node.js), paste this page's agent-chat prompt into Claude, Cursor, or any MCP-connected agent, or download the SKILL.md file and copy it into your agent's skills directory.

Is Document Chunker safe to use?

This skill has not completed SkillMD's automated safety review yet. SkillMD never runs a skill's scripts for you; review the SKILL.md before installing.

Which AI agents work with Document Chunker?

This skill is tagged as working with Claude Code, Claude.ai, OpenAI Codex. SKILL.md is an open format, so most agents that read a skills directory can load it too.

Is Document Chunker free to use?

Yes. Installing skills from SkillMD is free, and the skill stays under its author's original license.

Who published Document Chunker?

ellmos-ai (@ellmos-ai) published this skill. Their other Agent Skills are listed on their SkillMD profile.

Document Chunker by ellmos-ai — Agent Skill

Name: Document Chunker
Author: ellmos-ai

Document Chunker

Разбиение документов на перекрывающиеся фрагменты токенов для RAG-конвейеров и контекстных окон LLM. Нулевые зависимости.

ellmos-ai 6b33b73 2.0 KB Updated Sep 17, 2026

File contents

Русский — Официальная русская версия document-chunker.

Document Chunker (Русский)

Разбивает документы на перекрывающиеся фрагменты (чанки) токенов. Оптимизировано для RAG-конвейеров и контекстных окон LLM. Нулевые зависимости — только стандартная библиотека Python + re.

Использование

Как библиотека

from document_chunker import DocumentChunker

chunker = DocumentChunker(chunk_size=400, overlap=80)
chunks = chunker.chunk_text("Long text...")

for chunk in chunks:
    print(f"Chunk {chunk['chunk_id']}: {chunk['tokens']} tokens")

Разбиение файла

chunks = chunker.chunk_document("document.md", source="My Project")

Разбиение всего каталога

from document_chunker import chunk_corpus

chunks = chunk_corpus(["doc1.md", "doc2.txt"], source="Corpus")

CLI

python document_chunker.py document.md    # Single file
python document_chunker.py ./docs/        # Entire directory

Параметры

Параметр	По умолчанию	Описание
chunk_size	400	Макс. токенов в фрагменте
overlap	80	Перекрывающиеся токены между фрагментами

Поддерживаемые типы файлов

.txt, .md, .py, .sh

Журнал изменений

1.0.0 (2026-03-12)

Перенесено из BACH system/tools/document_chunker.py

---name: document-chunker-5description: Разбиение документов на перекрывающиеся фрагменты токенов для RAG-конвейеров и контекстных окон LLM. Нулевые зависимости.---<img src="banner.png" width="100%" alt="document-chunker banner">> **Русский** — Официальная русская версия `document-chunker`.# Document Chunker (Русский)Разбивает документы на перекрывающиеся фрагменты (чанки) токенов. Оптимизировано для RAG-конвейерови контекстных окон LLM. Нулевые зависимости — только стандартная библиотека Python + re.## Использование### Как библиотека```pythonfrom document_chunker import DocumentChunkerchunker = DocumentChunker(chunk_size=400, overlap=80)chunks = chunker.chunk_text("Long text...")for chunk in chunks: print(f"Chunk {chunk['chunk_id']}: {chunk['tokens']} tokens")```### Разбиение файла```pythonchunks = chunker.chunk_document("document.md", source="My Project")```### Разбиение всего каталога```pythonfrom document_chunker import chunk_corpuschunks = chunk_corpus(["doc1.md", "doc2.txt"], source="Corpus")```### CLI```bashpython document_chunker.py document.md # Single filepython document_chunker.py ./docs/ # Entire directory```## Параметры| Параметр | По умолчанию | Описание ||-----------|--------------|----------|| chunk_size | 400 | Макс. токенов в фрагменте || overlap | 80 | Перекрывающиеся токены между фрагментами |## Поддерживаемые типы файлов`.txt`, `.md`, `.py`, `.sh`## Журнал изменений### 1.0.0 (2026-03-12)- Перенесено из BACH system/tools/document_chunker.py

Frequently asked questions