O que estão usando para busca e scraping nos seus agentes?
Fala pessoal, tudo certo?
Aqui no Codex/ChatGPT eu utilizo várias ferramentas integradas para fazer buscas melhores na internet e extrair informações de sites, redes sociais e anúncios. Essa extração é o que chamamos de scraping.
Só a busca nativa do agente nem sempre dá conta do que eu preciso.
Por exemplo, uso ScrapeCreators e Apify para extrair informações de redes sociais e anúncios.
Já Firecrawl e Context.dev entram nas buscas e na extração de informações de sites.
Não é uma tarefa simples saber qual ferramenta escolher, pois cada uma tem seus pontos fortes, limitações e custos.
Por isso estou criando uma skill para ajudar o agente a escolher qual ferramenta usar em cada tarefa. Queria entender o uso de vocês nessa linha:
O que vocês precisaram buscar ou extrair recentemente e pra quê?
Como fizeram isso? Qual agente e quais ferramentas usaram? Seja ChatGPT, Codex, Claude, etc. Se usam só a busca nativa ou fazem manualmente, também vale.
O que funcionou bem e onde travou? Pode ser qualidade dos dados, bloqueios, custo, configuração ou a própria escolha da ferramenta.
Não precisa responder tudo. Um caso real com o que tentou fazer, o que usou e o que deu certo ou errado já ajuda bastante.
Se ainda não usou isso, conta o que gostaria de buscar ou extrair e o que te impediu de começar.
Quanto mais eu entender os casos reais de vocês, melhor vai ficar a skill que quero disponibilizar pra comunidade.
Deixem aqui nos comentários ↓