Show HN: Rust 기반 문서 청크 생성기 for RAG – 40배 빠르게, O(1) 메모리

Source: Hacker News

문제

LangChain의 청커는 순수 파이썬으로 구현되어 있어 대규모에서는 병목이 됩니다 — 대용량 문서 세트에서 느리고 메모리를 많이 사용합니다.

Krira Chunker가 다르게 하는 점

• Rust‑네이티브 처리 — LangChain 구현보다 약 40× 빠름
• O(1) 공간 복잡도 — 문서 크기에 관계없이 메모리 사용량이 일정함
• 드롭인 Python API — 기존 RAG 파이프라인과 모두 호환
• 프로덕션 레디 — 17버전 배포, 315회 이상 설치

설치

pip install krira-augment

피드백 요청

RAG 시스템을 구축하는 분들의 솔직한 피드백을 받고 싶습니다 — 현재 여러분이 겪고 있는 청킹 문제 중 이 솔루션이 아직 해결하지 못한 것이 무엇인가요?

Comments on Hacker News (Points: 14, Comments: 3)