Preprocess

分块处理对提升你在使用大型语言模型（LLMs）时的信息检索性能有很大影响。我们会对文档进行预处理，将其拆分为最佳的文本块。对于PDF和Office文件，我们会根据原始文档的结构和内容语义进行拆分。