São 5 projetos abertos no GitHub para quem precisa entender o mercado e acompanhar a concorrência: gerar um relatório de mercado com fontes, transformar sites em texto para a IA analisar, extrair preços e serviços de páginas públicas, deixar um agente navegar e anotar por você e montar uma coleta que roda toda semana.
Você não precisa instalar os 5. Escolha pela pergunta que você mais precisa responder hoje. Estrelas, licenças e comandos foram conferidos nos repositórios oficiais em 25 de outubro de 2026. Os usos descritos aqui são sugestões de aplicação, não resultados de teste.
Tabela de Conteúdo
Os 5 numa tabela
| Projeto | Para que serve | Onde roda | Licença | Estrelas |
|---|---|---|---|---|
| GPT Researcher | Relatório de pesquisa com citações, a partir da web ou dos seus documentos | Computador com Python 3.12+ ou Docker | Apache-2.0 | 30 mil |
| Firecrawl | Transformar páginas e sites inteiros em Markdown ou JSON | Nuvem oficial (com chave) ou hospedagem própria | AGPL-3.0 (SDKs MIT) | 195 mil |
| ScrapeGraphAI | Extrair dados de uma página descrevendo em texto o que você quer | Computador com Python, com modelo local (Ollama) ou por API | MIT | 32 mil |
| Browser Use | Agente de IA que usa o navegador como uma pessoa | Computador com Python 3.11+ | MIT | 119 mil |
| Crawlee | Biblioteca para montar coletores de dados recorrentes | Computador ou servidor com Node.js 22.13+ | Apache-2.0 | 26 mil |
Os 5, um por um
1. GPT Researcher: relatório de mercado com fontes
Agente de pesquisa profunda: um planejador quebra a sua pergunta em perguntas menores, agentes buscam as respostas em mais de 20 fontes e o resultado vira um relatório com citações, que pode passar de 2 mil palavras e ser exportado em PDF ou Word. Também pesquisa nos seus documentos locais (PDF, planilhas, apresentações). github.com/assafelovic/gpt-researcher
2. Firecrawl: o site inteiro vira texto para IA
API para buscar, raspar e mapear sites, inclusive páginas pesadas em JavaScript. Entrega o conteúdo em Markdown, JSON estruturado ou captura de tela, lista todas as URLs de um site e tem um modo agente em que você só descreve o que precisa (“encontre os planos de preço de tal empresa”). Tem servidor MCP e integração com n8n e Zapier. github.com/firecrawl/firecrawl
3. ScrapeGraphAI: peça em texto, receba os dados
Biblioteca Python que usa um modelo de linguagem para montar a extração: você informa a página e escreve o que quer (por exemplo, “o que a empresa faz, os fundadores e as redes sociais”) e recebe um JSON organizado. Funciona com modelos locais pelo Ollama, sem pagar API, ou com OpenAI, Gemini, Groq e outros. github.com/ScrapeGraphAI/Scrapegraph-ai
4. Browser Use: a IA navega por você
Agente que controla um navegador de verdade: abre páginas, clica, pesquisa, preenche campos e devolve o resultado em texto. Serve para tarefas que um raspador comum não resolve, como navegar por filtros de uma loja. A biblioteca é gratuita; você escolhe o modelo, inclusive local via Ollama. github.com/browser-use/browser-use
5. Crawlee: seu robô de coleta próprio
Biblioteca em JavaScript/TypeScript para construir coletores confiáveis, por HTTP ou com navegador (Playwright e Puppeteer), com fila de URLs, novas tentativas e armazenamento dos resultados em JSON. É a escolha para uma coleta fixa que você quer rodar toda semana. Também existe a versão em Python. github.com/apify/crawlee
O guia completo dos 5, com o primeiro passo de cada um.
- O primeiro passo de cada um, com o comando do README oficial
- O que cada um precisa antes: máquina, contas e chaves
- Por qual começar, de acordo com o seu trabalho
- Os cuidados de licença, custos e coleta de dados antes de usar com cliente
- 3 prompts prontos para o Claude Code instalar por você