Robots, Spyder.....aiuto x motori di ricerca

[Umberto]

Domanda:
come faccio a dire allo spyder di un motore di ricerca di aggiornare un sito più di frequente? Uso il robots.txt? Che ci scrivo? E'possibile una scansione giornaliera o settimanale?

Grazie

[3dzone]

nel file robot.txt puoi indicare qualli cartelle indicizzare e quali spyder far passare oppure non far passare.
gli spyder non passano a comando ma passano in funzione delgi aggiornamenti.
Lo spyder di google ( se non ricordo male si chiama googlebot) passa na volta al mese, se questo spyder vede che ci son stati molti aggiornamenti dall'ultimo passaggio passa entro i 15 gg. ed incamera i cambiamenti in un db temporaneo se i cambiamenti aumentano lui passa ogni settimana e cosi via per poi passare ogni gg. se i cambiamenti sono tantissimi, considera cmq che i ddati raccolti e messi nel db temporaneo impiegano circa 7-15 gg. per passare nel db online del motore di ricerca ( questo quando googlebot passa ogni 15 gg. ).
Ci sono anche dei metatag che si possono inserire nell'html per chiamare sti spyder, ma molti motori se ne fottono allegramente. Goolge inktomi e msn se ne fottono per esempio.
E' un pò comlesso il discorso , e le variabili son tantissime , spiegartelo in due righe di testo è impossibile cmq spero di averti chiarito qualche dubbio cosi puoi approfondire in rete tutto il resto che vuoi sapere.

[Umberto]

Grazie 1000! Ho visto siti aggiornati praticamente il giorno stesso delle news (photorevolt, ad es.) e pensavo bisognasse dire allo spyder di "visitare" più frequentemente il sito...invece è più logico come dici tu!

adesso vedo in rete per la costruzione di un robot.txt un po'decente...

Grazie