반응형 sementic chungking1 Semantic Chunking: 의미 기반 청킹이 중요한 이유 📌 개요대용량의 텍스트 데이터를 다룰 때, 특히 LLM(Large Language Model) 을 활용하는 시스템에서는 전체 문서를 한 번에 처리하는 것이 어렵습니다. 이때 우리는 문서를 작은 덩어리, 즉 "청크(Chunk)" 로 나누는 작업을 하게 되는데요. 단순히 일정한 글자 수나 문단 수로 자르는 것이 아니라, 의미 단위로 나누는 것을 바로 Semantic Chunking이라고 부릅니다.이 글에서는 Semantic Chunking이 무엇인지, 왜 중요한지, 어떻게 활용할 수 있는지에 대해 알아보겠습니다.🔍 의미: Semantic Chunking이란?✅ 정의Semantic Chunking은 문서나 텍스트를 문법적·논리적·의미 기반으로 청크(덩어리)로 분할하는 기법입니다. 단순히 500자마다 자르거.. 2025. 7. 24. 이전 1 다음 반응형