Hola,
En el caso del
buscador de blogs de Google, es posible informarle sobre nuevo contenido utilizando, al menos, un cliente "XML-RPC", tal como se especifica en
Weblogs.com. Creo que también es posible hacerlo de otro modo, pero, la
ayuda del buscador de blogs de Google no parece funcionar ahora mismo. De hecho Weblogs.com también ofrece servicios de "ping" y también Yahoo y otros sitios web.
En el caso del buscador generalista de Google, creo que lo que se "lleva" es usar archivos "sitemaps.xml", que se sitúan en el directorio raíz de nuestro sitio web, y que algunos "CMS" (Content Managament System) se encargan de actualizar cuando conviene. Supongo que en este caso será el robot de Google el que se encargue de leer dicho archivo y actuar en consecuencia.
De todas formas, ya digo, siempre basado en mi poca experiencia, es el "robot" de Google quien se encarga de todo... y si una página web se actualiza a menudo, dicho "robot" lo sabrá y no dejará de buscar en ella incluso varias veces... a la hora. Claro está que de ahí a aparecer en los primeros resultados del buscador hay un mundo.
Como he dicho antes, yo puedo escribir una entrada sobre WordPress en mi bitácora y Google la indexará, a buen seguro, pero, también a buen seguro no mostrará mi bitácora entre los primeros resultados de la búsqueda "WordPress": hay cientos de miles de páginas que hablan de WordPress, algunas incluso que se especializan en este asunto. Es lógico que no muestre mi bitácora, por lo tanto, a no ser que alguien busque "Wordpress con rosquillas" y yo hable, precisamente, de algo así.
Pero veo que me enrrollo demasiado, teniendo en cuanto mi ignorancia en estos asuntos... me conformo conque quede una idea más o menos clara, y aventurando que fuera a esta a la que se refiriera el compañero que inició el hilo: no basta que Google te indexe para aparecer en los resultados de las búsquedas, mucho menos en los primeros lugares.
PD. Una buena biblioteca para trabajar con el protocolo "XML-RPC" desde PHP es
Incutio XML-RPC.