O Maven AGI usa o Firecrawl para rastrear um site que você indicar e trazer esse conteúdo para sua própria base de conhecimento, sem exportações ou envios manuais.
O que o Maven AGI faz com o Firecrawl
Para conteúdo que está em um site em vez de uma plataforma como Confluence ou Notion, o Firecrawl dá ao Maven um caminho genérico de entrada. Você define o escopo, a URL raiz e os filtros de caminho de uma fonte de rastreamento, e o Maven converte as páginas correspondentes em markdown limpo na base de conhecimento própria dessa fonte, rastreando novamente no cronograma que você escolher.
Principais recursos
- Rastreamento inteligente. Configure a profundidade de rastreamento, filtros de caminho e suporte a sitemap para delimitar exatamente quais páginas de um site serão rastreadas.
- Markdown limpo, uma BC por fonte. Cada fonte de rastreamento recebe sua própria base de conhecimento. As páginas são convertidas em markdown limpo, removendo anúncios, navegação e elementos padrão.
- Atualizações programadas. Rastreie novamente cada fonte diariamente, semanalmente ou mensalmente, ou atualize-a sob demanda, para que sua base de conhecimento acompanhe o site ativo.
Como funciona
- Adicione uma fonte. Informe uma URL raiz e defina o escopo do rastreamento e as opções de markdown.
- Rastreie. O Firecrawl segue os links dentro desse escopo e converte as páginas em markdown.
- Mantenha-se atualizado. Defina uma frequência de atualização, ou atualize sob demanda, para manter a base de conhecimento sincronizada com o site ativo.
Casos de uso comuns
- Traga um site de documentação pública ou central de ajuda para a base de conhecimento do Maven sem um conector de plataforma dedicado.
- Mantenha as respostas de IA atuais conforme páginas de marketing ou documentação mudam.
- Combine conteúdo da web rastreado com outras fontes de conhecimento em um único agente Maven.
Integrações relacionadas
Perguntas frequentes
Para que o Firecrawl é usado no Maven AGI?
O Firecrawl rastreia um site que você indicar e importa o conteúdo como markdown limpo para sua própria base de conhecimento do Maven.
Precisamos de uma plataforma ou CMS específico para isso funcionar?
Não. O Firecrawl funciona em qualquer site público, o que o torna uma boa opção quando seu conteúdo não está em uma plataforma para a qual o Maven tem um conector dedicado.
Como o Maven mantém o conteúdo rastreado atualizado?
Você define uma frequência de atualização, diária, semanal ou mensal, ou atualiza uma fonte sob demanda. Cada rastreamento bem-sucedido publica uma nova versão da base de conhecimento dessa fonte.
Veja nas suas próprias conversas.
Solicite uma demonstração personalizada gratuita.