O problema oculto dos PDFs no Claude
Quem trabalha com documentos extensos no Claude conhece a frustração: colar um PDF de 200 páginas no chat não é um custo único. Como o histórico da conversa é reenviado ao modelo a cada mensagem, aquele documento gigante é cobrado novamente a cada pergunta de follow-up. O resultado é uma conta de tokens que cresce silenciosamente — e exponencialmente.
O comportamento padrão do Claude converte cada página em imagem (para preservar gráficos e layouts) enquanto extrai o texto separadamente. Só o texto já consome de 1.500 a 3.000 tokens por página. E o Prompt Caching, embora ajude, não resolve o problema central: o documento inteiro ainda atravessa a fronteira para os servidores do provedor.
Token Saver: RAG híbrido local como solução
A equipe da Marktechpost acaba de lançar o Token Saver, uma extensão open-source (licença MIT, v1.0) para o Claude Desktop baseada no Model Context Protocol (MCP). Desenvolvido por Arnav Rai durante seu estágio na Marktechpost, o Token Saver muda fundamentalmente a forma como o Claude interage com documentos locais.
Em vez de enviar o PDF inteiro ao modelo, o Token Saver atua como um servidor MCP local: um programa leve que roda na sua máquina e que o Claude pode chamar como ferramenta. O PDF nunca sai do seu disco rígido.
Como funciona o RAG híbrido local
Quando você faz uma pergunta, o Token Saver usa Hybrid RAG — considerado o padrão ouro em recuperação de documentos — combinando duas técnicas:
- Keyword Matching (BM25): busca por palavras exatas usando FTS5 do SQLite (peso 0.4)
- Semantic Search (Cosine Similarity): usa o modelo local all-MiniLM-L6-v2 (peso 0.6) para entender o significado da pergunta, não apenas casar palavras
Mesclando essas duas abordagens, o servidor vasculha o arquivo localmente e entrega ao Claude apenas os trechos realmente relevantes. O Claude então sintetiza a resposta citando as páginas exatas do documento e mostrando quantos tokens você economizou.
Pipeline de 8 estágios
Antes que qualquer texto chegue ao Claude, o pipeline de RAG híbrido executa oito etapas rápidas:
- Extract: usa pypdfium2 para extrair texto do PDF
- Chunk: divide em trechos de 180 palavras, com sobreposição de 40 palavras
- Score (Hybrid RAG): avalia os chunks combinando BM25 e embeddings
- Gate: impõe limiar de qualidade — chunks sem palavras-chave exatas precisam de similaridade semântica mínima de 0.25
- Deduplicate: elimina trechos quase idênticos
- Trim: reduz cada passagem estritamente às frases que respondem à pergunta
- Budget: limita o payload total enviado ao Claude em 8.000 caracteres
- Envelope: encapsula o texto recuperado com o arquivo fonte e número da página
Economia de 99% em escala
Como o pipeline limita o texto retornado, a economia de tokens cresce exponencialmente com o tamanho do documento. Nos benchmarks da equipe (medidos com tiktoken, assumindo uma pergunta por documento), a economia chega a 92% a 99%. Para profissionais que lidam repetidamente com decisões judiciais, relatórios financeiros, normas técnicas ou livros-texto densos, isso elimina o “imposto de tokens” que se acumula a cada interação.
Privacidade e segurança
O modelo de segurança do Token Saver se apoia em três pilares:
- Zero Uploads: o documento nunca sai da sua máquina
- Folder Allowlisting: você configura uma pasta específica; o servidor se recusa ativamente a ler arquivos fora dela
- Network Isolation: a comunicação com o Claude Desktop é via stdio — sem portas de rede abertas, reduzindo drasticamente a superfície de ataque
Instalação em minutos
Diferente da maioria das ferramentas open-source de IA que exigem ambientes Python complexos, o Token Saver é distribuído como um único arquivo .mcpb. Basta baixar do GitHub Releases, abrir o Claude Desktop → Configurações → Extensões → Instalar extensão, selecionar a pasta de PDFs e pronto. Zero Python, zero terminal.
Por que isso importa
O Token Saver resolve um gargalo real do ecossistema Claude que afeta especialmente profissionais brasileiros que trabalham com documentos regulatórios, jurídicos e técnicos em português. A combinação de economia massiva de tokens, privacidade total dos dados e instalação sem fricção faz desta ferramenta uma adição prática imediata ao fluxo de trabalho de qualquer usuário pesado do Claude Desktop.
O projeto está disponível no GitHub com licença MIT e roda em Claude 3.5 Sonnet (recomendado) e Claude 3 Opus.
Descubra mais sobre noticiAI
Assine para receber nossas notícias mais recentes por e-mail.
