Firecrawl com agente de IA: extrair dados de sites sem código

· DoubleX

Resposta rápida

Conecte o Firecrawl ao DoubleX Agentes, libere o conector para um agente e peça em linguagem natural: extrair uma página, pesquisar um assunto ou coletar conteúdo estruturado de um site. O agente devolve o resultado e pode gravá-lo em planilha, documento ou no Brain, sob demanda ou em rotina agendada.

Times técnicos e de pesquisa gastam muito tempo copiando conteúdo de sites para planilhas e documentos: páginas de documentação, artigos, tabelas de concorrentes, listas de fornecedores. Com o Firecrawl ligado a um agente de IA, esse trabalho vira um pedido em linguagem natural, e o resultado já cai onde a equipe trabalha.

O que o Firecrawl faz dentro de um agente de IA?#

O Firecrawl é um serviço que extrai páginas, pesquisa na web e coleta conteúdo estruturado de sites. Dentro de um agente, ele vira um conjunto de ferramentas que o agente usa quando o seu pedido exige ler uma página ou buscar informação fora da empresa.

Na prática, o agente decide qual ferramenta usar:

  • Extrair uma página: lê o conteúdo de uma ou mais URLs e traz o texto organizado.
  • Pesquisar: busca na web sobre um assunto e reúne o que encontrou.
  • Coletar conteúdo estruturado: transforma o que está na página em campos, como título, data, autor, preço ou descrição.

O agente não precisa de código. Você descreve o que quer e ele escolhe os passos, mostrando no histórico da tarefa cada ferramenta usada.

Como conectar o Firecrawl ao DoubleX Agentes?#

Você conecta o Firecrawl na tela Conectores e depois libera o conector para o agente que vai usá-lo. O processo leva poucos passos e as permissões ficam sob seu controle.

  1. Crie a conta no DoubleX Agentes (grátis, sem cartão). Se quiser, faça antes o diagnóstico para o produto sugerir por onde começar. O Início rápido mostra o caminho.
  2. Abra a tela Conectores e escolha o Firecrawl, na categoria pesquisa.
  3. Siga a conexão pedida e defina se ela vale só para você, para o time ou para a empresa.
  4. Na tela Agentes, abra o agente de pesquisa (ou crie um) e marque o Firecrawl como sistema que ele pode usar.
  5. Confira quais ações o agente pode executar. Como o Firecrawl lê conteúdo público, o risco é baixo, mas vale limitar o uso aos agentes que realmente precisam.
  6. Faça um primeiro pedido na tela Tarefas e confira o histórico.

Para detalhes sobre como os conectores funcionam, veja a documentação de Conectores.

Que tipos de pedido dá para fazer? Exemplos práticos de extração e pesquisa#

Dá para pedir desde a leitura de uma única página até a coleta de várias páginas de um site com campos definidos. Quanto mais claro o formato desejado, melhor o resultado.

NecessidadeComo o agente ajudaFerramenta do Firecrawl
Resumir uma página de documentaçãoLê a URL e entrega um resumo com os pontos principaisExtração de página
Levantar o que se publica sobre um temaPesquisa, reúne fontes e organiza por assuntoPesquisa
Montar uma tabela com dados de vários artigosColeta título, data e autor de cada páginaConteúdo estruturado
Comparar páginas de produto de fornecedoresExtrai especificações e alinha em colunasExtração e estruturação

Exemplos de pedidos para copiar:

  • "Extraia o conteúdo desta página de documentação e me entregue um resumo de dez linhas com os passos de instalação."
  • "Pesquise artigos recentes sobre regulação de dados pessoais em saúde e liste título, fonte e uma frase de resumo de cada um."
  • "Colete de cada página desta lista de URLs o título, a data de publicação e o autor e organize em tabela."
  • "Leia as páginas de preços e de recursos deste fornecedor e liste o que está incluído em cada plano, sem inventar o que não aparecer."

Como transformar o conteúdo coletado em planilha, documento ou nota no Brain?#

O agente entrega o resultado na própria tarefa e, com os conectores certos, grava em planilha, documento ou no Brain. Assim a coleta deixa de ser um texto solto e vira material reutilizável.

  • Planilha: com o Google Sheets conectado, o agente acrescenta linhas a uma planilha existente ou cria uma nova, com uma coluna por campo coletado.
  • Documento: com o Google Docs conectado, o agente cria um relatório de pesquisa com resumo, fontes e conclusões.
  • Brain: o Brain é a base de conhecimento da empresa, com notas, processos e documentos. Salvar ali o que foi coletado permite que outros agentes consultem essas informações depois. Veja a documentação do Brain.
  • Artefato: o agente também pode entregar um arquivo, como relatório ou planilha, na tela Artefatos.

Exemplos de pedidos:

  • "Coloque o resultado em uma nova planilha no Google Sheets, com as colunas URL, título, data e resumo."
  • "Crie um documento no Google Docs com o resumo da pesquisa e a lista de fontes consultadas."
  • "Salve uma nota no Brain, na pasta Pesquisa de mercado, com o que você coletou e a data da coleta."

Como criar uma rotina agendada de coleta de conteúdo de sites?#

Você cria uma rotina com um gatilho de horário e o agente repete a coleta sozinho, por exemplo toda segunda às 8h. A rotina roda com as permissões de quem a criou.

  1. Teste o pedido manualmente na tela Tarefas até o resultado sair no formato certo.
  2. Crie um gatilho agendado para o agente: todo dia, toda semana, a cada hora ou uma única vez numa data.
  3. Escreva o pedido da rotina com a lista de URLs ou o tema, o formato de saída e o destino (planilha, documento ou Brain).
  4. Acompanhe os primeiros resultados no histórico de cada tarefa e ajuste as instruções se for preciso.

Outros gatilhos também existem, como webhook ou e-mail recebido. Veja a documentação de Gatilhos para os detalhes.

Exemplos de pedidos para rotinas:

  • "Toda segunda às 8h, leia as páginas de novidades destes três sites de documentação e acrescente na planilha uma linha por novidade, com data e link."
  • "Uma vez por semana, pesquise notícias sobre o nosso setor e salve um resumo em uma nota no Brain."

Que combinações com outros conectores funcionam bem e quais cuidados tomar?#

O Firecrawl funciona melhor como etapa de coleta, ligado a conectores que guardam, analisam ou distribuem o resultado. Cada combinação segue as permissões que você definir para o agente.

CombinaçãoPara que serve
Firecrawl + Google SheetsGuardar dados coletados em linhas e colunas
Firecrawl + Google DocsGerar relatórios de pesquisa com fontes
Firecrawl + Slack ou GmailAvisar o time quando a coleta terminar, com confirmação antes de enviar
Firecrawl + HexAnalisar os dados coletados. Veja o guia de Hex com agente de IA

Cuidados úteis:

  • Respeite os termos de uso e as regras de acesso de cada site, e colete apenas o que a sua empresa pode usar.
  • Evite coletar dados pessoais sem base legal. O DoubleX Agentes segue a LGPD, mas a responsabilidade pelo que se coleta é da empresa.
  • Mantenha o agente com o mínimo de permissões: leitura nos sistemas onde ele só precisa consultar.
  • O agente pede confirmação antes de enviar, apagar ou alterar algo nos sistemas, e tudo fica no histórico da tarefa.

Perguntas frequentes#

Preciso saber programar para usar o Firecrawl com um agente?#

Não. Você descreve em linguagem natural o que quer extrair e em que formato, e o agente cuida dos passos. Quem quiser ir além pode usar a API REST, a CLI ou o servidor MCP do DoubleX Agentes.

O agente consegue ler várias páginas de uma vez?#

Sim, você pode passar uma lista de URLs ou indicar um site e o que quer coletar. Para resultados melhores, defina os campos esperados e peça a URL de origem de cada dado.

Posso guardar o que foi coletado para outros agentes usarem?#

Sim. Salve o conteúdo como nota ou documento no Brain, e os agentes passam a consultá-lo ao responder. Veja a documentação do Brain.

A coleta pode rodar sozinha?#

Sim, por meio de gatilhos agendados, por exemplo todo dia ou toda semana. A rotina usa as permissões de quem a criou, e cada execução fica registrada no histórico.

O conteúdo que o agente coleta é usado para treinar modelos?#

Não. O conteúdo da empresa não é usado para treinar modelos, e os pedidos só vão para provedores de IA que não usam o que recebem para treinamento. Você também pode ativar a retenção zero na tela Modelos.