Que me conviene? Problema de modularizacion

[Skeletron]

Hola gente..
Les comento que estoy creando una web, que es como un buscador...

La cuestion, es que la web tiene su buscador, y su motor indexador..

Tanto para indexar, como para buscar, tengo que crear un HASH bastante complicado..

La pagina .php del index, hace un INCLUDE a otro .php donde tengo todos los metodos en donde se crea el HASH de la busqueda, para luego compararlo en la base de datos

Y tambien en la pagina .php del BOT INDEXADOR, hago tambien un INCLUDE al archivo .php donde estan los metodos de HASH, para crear el hash y guardarlo en la base de datos..

Se supone que el indexador estará funcionando SIEMPRE... y el buscador, no siempre (1 vez por busqueda)

Ustedes que dicen?
Utilizar el mismo archivo tanto para el BOT como para la busqueda, puede empeorar el rendimiento? o conviene por el tema del cache y demas?

[[u]nsigned]

El BOT INDEXADOR es un verdadero script corriendo siempre en el servidor,o es mas bien una rutina que se ejecuta via navegador?

Es decir, el BOT solo corre cuando alguien navega en tu sitio?

De ser asi, yo incrutaria el bot en todo lugar posible, cosa de que la indexacion sea la maxima posible..

Saludos

[Skeletron]

Sabes.. lo voy a hacer en VB.NET... para tener mejor manejo de las etiquetas HTML.. No he probado con php, pero debe ser un quilombo..

La idea es hacer un programa en VB.NET que acceda a una web RAIZ, se meta por todos sus links, y busque imagenes en ella.. descargue las imagenes, le haga un tratamiento, y guarde sus datos en una base de datos.