O que é chunking em IA? Uma solução para documentos grandes
Avalie esse Vídeo
Passar documentos grandes como entrada para um LLM significa que o LLM precisa analisar as informações mais relevantes para responder às query dos usuários. Isso pode ser um desafio, pois os LLMs são projetados para processar entrada sequencialmente, token por token. É aqui que o chunking ajuda. - Saiba mais sobre chunking em IA na Central do Desenvolvedor: https://mdb.link/choosing-chunking-strategy