Ho appena scoperto un servizio di Google chiamato "Google Sitemap". Permette ai webmaster di indicizzare i propri siti in maniera più efficiente nel motore di ricerca di Google. Praticamente, invece di lasciar fare il lavoro di indicizzazione ai crawler, si invia a Google un file XML che contiene gli URL da far analizzare. In questo modo si può strutturare l'indice del sito in maniera ottimale per farlo visualizzare nelle ricerce su Google. Ravanando nel Web ho poi trovato un comodissimo plugin per WordPress che genera automaticamente un file XML contenente la struttura di un blog in WordPress (gestendo quindi categorie, articoli, commenti e pagine) e lo invia a Google ad ogni aggiornamento. In questo modo mantiene aggiornato il DB di Google in tempo reale.
Un plugin simile è disponibile anche per Drupal