As páginas obtidas por scraping incluem cabeçalhos, rodapés e anúncios que reduzem a qualidade das respostas da IA. Esta atualização permite excluir elementos HTML indesejados de forma global, além de personalizar exceções para URLs específicas

Exclusão de seletores CSS

Controle quais elementos HTML são coletados das páginas da web usando seletores CSS.​​

Exclusões globais padrão

Defina seletores CSS que se aplicam a todas as URLs raspadas em Advanced > Web Scraping. Os seletores mais comuns incluem header, footer, .sidebar e .ad.​

Substituições específicas por URL

Substitua as exclusões padrão ao importar URLs individuais. Expanda a seção Options no modal Add Documents para personalizar os seletores de páginas específicas sem alterar os padrões globais.​

📘 Configuração persistente entre atualizações

As configurações de seletores CSS persistem em todas as atualizações e sincronizações automáticas. Suas regras de exclusão permanecem ativas sempre que o conteúdo é raspado novamente

Status de scraping em tempo real

Acompanhe o progresso da importação diretamente no Knowledge hub. Os scrapes ativos exibem um ícone de carregamento com uma dica (tooltip) mostrando as páginas restantes

Inspecionando os detalhes do documento

Acesse informações detalhadas de qualquer documento pelo Knowledge hub. O modal Document Details mostra quais seletores CSS foram excluídos e oferece uma prévia dos chunks para validar a qualidade da segmentação do conteúdo.