Existe um motor de busca, incluindo a indexação bot que pode ser usado para compensar catálogo especial, alimentando o bot com certas propriedades?

Question

Nosso aplicativo (C # /. NET) precisa de uma grande quantidade de consultas para pesquisar. A política da Google 50.000 por dia não é suficiente. Precisamos de algo que seria rastrear sites da Internet por regras específicas que estabelecemos (por ex. Domínios de países) e reunir URLs, textos, palavras-chave, nome de sites e criar o nosso próprio catálogo interna, de modo que não seria limitada a qualquer motor de busca maciça externa como o Google ou Yahoo.

Existe alguma solução de código aberto que poderíamos usar para instalá-lo no nosso servidor?

Nenhum ponto em re-inventar a roda.

Answer 1

DataparkSearch pode ser o que você precisa. Ou revisão esta lista de outros motores de Open Source da pesquisa.