Yek: 一款用于LLM的快速文本文件分块工具

Yek是一个用Rust编写的快速工具，用于读取仓库或目录中的文本文件，将它们分割成块，并将其序列化以供大型语言模型(LLM)使用。它能智能地忽略无用文件（例如，使用.gitignore规则和Git历史记录），将内容分割成基于标记数量或字节大小的块，并支持多种配置选项，例如自定义忽略模式和文件优先级规则。Yek旨在简化LLM的数据准备过程，提高效率。