Donde puedo conseguir el mejor programa en PHP que sea un buscador y un spider para indexar 100 webs, rapido?

script de pago o gratuito. He probado isearch (no actualizado) sphider (es bueno pero aun le falta). Como sera unbuscador tematico, solo indexare un maximo de 100 webs con sus paginas, que seran de 6 a 10 millones de paignas indexadas.

El problema es que cuando tiene mucho indexado se hace muy lento, carga al servidor y va todo mal.

necesito un sistema que por un lado este el buscador y por otro lado en otra maquina un sistema SPIDER muy muy potente

Respuestas:
Puedes probar con phpDig http://www.phpdig.net/

o puedes probar con mngoSearch que es muy bueno, pero no está en todo en php, al indexador debes compilarlo, ya que para tener mejor respuesta está hecho en C++

http://search.mnogo.ru/download.html.

Lo que si tiene es un frontend de búsqueda en php :)

Suerte
preguntas y respuestas agregadas...