chunking

1周前 · ai

构建可靠的 RAG 系统

封面图片：Building Reliable RAG Systems https://media2.dev.to/dynamic/image/width=1000,height=420,fit=cover,gravity=auto,format=auto/https%3A%2F%2Fdev-to-...

#retrieval-augmented generation #RAG #chunking #retrieval #reranking #large language models #LLM engineering #prompt engineering
2周前 · software

所以，你想要快速 chunk 吗？

请提供您希望翻译的具体摘录或摘要文本，我会为您翻译成简体中文。

#chunking #performance #data processing #optimization #programming
1个月前 · ai

RAG 分块策略深度解析

检索增强生成（RAG）系统面临一个根本性挑战：大型语言模型（LLM）拥有上下文窗口限制，而文档往往超出这些限制。仅仅填塞……

#RAG #chunking #LLM #context window #vector databases #retrieval-augmented generation #semantic segmentation
1个月前 · software

正确的 Java Streams 分块方式 — 一个在 JDK 中应有的 Collector

封面图片：Chunking Java Streams the Right Way — A Collector That Feels Like It Should Be in the JDK https://media2.dev.to/dynamic/image/width=1000,height=...

#java #streams #collector #chunking #jdk #functional-programming #java-8 #api-design
1个月前 · ai

我构建了一个 TUI 来可视化 RAG 分块，因为 chunk_size=1000 是一个谎言 📉

说实话吧。当你在构建 RAG Retrieval‑Augmented Generation pipeline 时，如何选择 chunk_size 和 overlap？如果你和我一样……

#RAG #chunking #LLM #retrieval-augmented generation #text user interface #visualization #prompt engineering
1个月前 · ai

Chunk 边界与元数据对齐：RAG 不稳定性的隐藏根源

封面图片：Chunk Boundary 与 Metadata Alignment：RAG 不稳定性的隐藏来源 https://media2.dev.to/dynamic/image/width=1000,height=420,fit=cover,...

#RAG #chunking #metadata alignment #vector database #embeddings #LLM retrieval #prompt engineering