Firecrawl com agente de IA: extrair dados de sites sem código
· DoubleX
Resposta rápida
Conecte o Firecrawl ao DoubleX Agentes, libere o conector para um agente e peça em linguagem natural: extrair uma página, pesquisar um assunto ou coletar conteúdo estruturado de um site. O agente devolve o resultado e pode gravá-lo em planilha, documento ou no Brain, sob demanda ou em rotina agendada.
Times técnicos e de pesquisa gastam muito tempo copiando conteúdo de sites para planilhas e documentos: páginas de documentação, artigos, tabelas de concorrentes, listas de fornecedores. Com o Firecrawl ligado a um agente de IA, esse trabalho vira um pedido em linguagem natural, e o resultado já cai onde a equipe trabalha.
O que o Firecrawl faz dentro de um agente de IA?#
O Firecrawl é um serviço que extrai páginas, pesquisa na web e coleta conteúdo estruturado de sites. Dentro de um agente, ele vira um conjunto de ferramentas que o agente usa quando o seu pedido exige ler uma página ou buscar informação fora da empresa.
Na prática, o agente decide qual ferramenta usar:
- Extrair uma página: lê o conteúdo de uma ou mais URLs e traz o texto organizado.
- Pesquisar: busca na web sobre um assunto e reúne o que encontrou.
- Coletar conteúdo estruturado: transforma o que está na página em campos, como título, data, autor, preço ou descrição.
O agente não precisa de código. Você descreve o que quer e ele escolhe os passos, mostrando no histórico da tarefa cada ferramenta usada.
Como conectar o Firecrawl ao DoubleX Agentes?#
Você conecta o Firecrawl na tela Conectores e depois libera o conector para o agente que vai usá-lo. O processo leva poucos passos e as permissões ficam sob seu controle.
- Crie a conta no DoubleX Agentes (grátis, sem cartão). Se quiser, faça antes o diagnóstico para o produto sugerir por onde começar. O Início rápido mostra o caminho.
- Abra a tela Conectores e escolha o Firecrawl, na categoria pesquisa.
- Siga a conexão pedida e defina se ela vale só para você, para o time ou para a empresa.
- Na tela Agentes, abra o agente de pesquisa (ou crie um) e marque o Firecrawl como sistema que ele pode usar.
- Confira quais ações o agente pode executar. Como o Firecrawl lê conteúdo público, o risco é baixo, mas vale limitar o uso aos agentes que realmente precisam.
- Faça um primeiro pedido na tela Tarefas e confira o histórico.
Para detalhes sobre como os conectores funcionam, veja a documentação de Conectores.
Que tipos de pedido dá para fazer? Exemplos práticos de extração e pesquisa#
Dá para pedir desde a leitura de uma única página até a coleta de várias páginas de um site com campos definidos. Quanto mais claro o formato desejado, melhor o resultado.
| Necessidade | Como o agente ajuda | Ferramenta do Firecrawl |
|---|---|---|
| Resumir uma página de documentação | Lê a URL e entrega um resumo com os pontos principais | Extração de página |
| Levantar o que se publica sobre um tema | Pesquisa, reúne fontes e organiza por assunto | Pesquisa |
| Montar uma tabela com dados de vários artigos | Coleta título, data e autor de cada página | Conteúdo estruturado |
| Comparar páginas de produto de fornecedores | Extrai especificações e alinha em colunas | Extração e estruturação |
Exemplos de pedidos para copiar:
- "Extraia o conteúdo desta página de documentação e me entregue um resumo de dez linhas com os passos de instalação."
- "Pesquise artigos recentes sobre regulação de dados pessoais em saúde e liste título, fonte e uma frase de resumo de cada um."
- "Colete de cada página desta lista de URLs o título, a data de publicação e o autor e organize em tabela."
- "Leia as páginas de preços e de recursos deste fornecedor e liste o que está incluído em cada plano, sem inventar o que não aparecer."
Como transformar o conteúdo coletado em planilha, documento ou nota no Brain?#
O agente entrega o resultado na própria tarefa e, com os conectores certos, grava em planilha, documento ou no Brain. Assim a coleta deixa de ser um texto solto e vira material reutilizável.
- Planilha: com o Google Sheets conectado, o agente acrescenta linhas a uma planilha existente ou cria uma nova, com uma coluna por campo coletado.
- Documento: com o Google Docs conectado, o agente cria um relatório de pesquisa com resumo, fontes e conclusões.
- Brain: o Brain é a base de conhecimento da empresa, com notas, processos e documentos. Salvar ali o que foi coletado permite que outros agentes consultem essas informações depois. Veja a documentação do Brain.
- Artefato: o agente também pode entregar um arquivo, como relatório ou planilha, na tela Artefatos.
Exemplos de pedidos:
- "Coloque o resultado em uma nova planilha no Google Sheets, com as colunas URL, título, data e resumo."
- "Crie um documento no Google Docs com o resumo da pesquisa e a lista de fontes consultadas."
- "Salve uma nota no Brain, na pasta Pesquisa de mercado, com o que você coletou e a data da coleta."
Como criar uma rotina agendada de coleta de conteúdo de sites?#
Você cria uma rotina com um gatilho de horário e o agente repete a coleta sozinho, por exemplo toda segunda às 8h. A rotina roda com as permissões de quem a criou.
- Teste o pedido manualmente na tela Tarefas até o resultado sair no formato certo.
- Crie um gatilho agendado para o agente: todo dia, toda semana, a cada hora ou uma única vez numa data.
- Escreva o pedido da rotina com a lista de URLs ou o tema, o formato de saída e o destino (planilha, documento ou Brain).
- Acompanhe os primeiros resultados no histórico de cada tarefa e ajuste as instruções se for preciso.
Outros gatilhos também existem, como webhook ou e-mail recebido. Veja a documentação de Gatilhos para os detalhes.
Exemplos de pedidos para rotinas:
- "Toda segunda às 8h, leia as páginas de novidades destes três sites de documentação e acrescente na planilha uma linha por novidade, com data e link."
- "Uma vez por semana, pesquise notícias sobre o nosso setor e salve um resumo em uma nota no Brain."
Que combinações com outros conectores funcionam bem e quais cuidados tomar?#
O Firecrawl funciona melhor como etapa de coleta, ligado a conectores que guardam, analisam ou distribuem o resultado. Cada combinação segue as permissões que você definir para o agente.
| Combinação | Para que serve |
|---|---|
| Firecrawl + Google Sheets | Guardar dados coletados em linhas e colunas |
| Firecrawl + Google Docs | Gerar relatórios de pesquisa com fontes |
| Firecrawl + Slack ou Gmail | Avisar o time quando a coleta terminar, com confirmação antes de enviar |
| Firecrawl + Hex | Analisar os dados coletados. Veja o guia de Hex com agente de IA |
Cuidados úteis:
- Respeite os termos de uso e as regras de acesso de cada site, e colete apenas o que a sua empresa pode usar.
- Evite coletar dados pessoais sem base legal. O DoubleX Agentes segue a LGPD, mas a responsabilidade pelo que se coleta é da empresa.
- Mantenha o agente com o mínimo de permissões: leitura nos sistemas onde ele só precisa consultar.
- O agente pede confirmação antes de enviar, apagar ou alterar algo nos sistemas, e tudo fica no histórico da tarefa.
Perguntas frequentes#
Preciso saber programar para usar o Firecrawl com um agente?#
Não. Você descreve em linguagem natural o que quer extrair e em que formato, e o agente cuida dos passos. Quem quiser ir além pode usar a API REST, a CLI ou o servidor MCP do DoubleX Agentes.
O agente consegue ler várias páginas de uma vez?#
Sim, você pode passar uma lista de URLs ou indicar um site e o que quer coletar. Para resultados melhores, defina os campos esperados e peça a URL de origem de cada dado.
Posso guardar o que foi coletado para outros agentes usarem?#
Sim. Salve o conteúdo como nota ou documento no Brain, e os agentes passam a consultá-lo ao responder. Veja a documentação do Brain.
A coleta pode rodar sozinha?#
Sim, por meio de gatilhos agendados, por exemplo todo dia ou toda semana. A rotina usa as permissões de quem a criou, e cada execução fica registrada no histórico.
O conteúdo que o agente coleta é usado para treinar modelos?#
Não. O conteúdo da empresa não é usado para treinar modelos, e os pedidos só vão para provedores de IA que não usam o que recebem para treinamento. Você também pode ativar a retenção zero na tela Modelos.