Google Code: documentazione su crawling e indexing

Google Code CrawlingGoogle ci fa sapere dal suo blog ufficiale che è ora disponibile un aiuto in più per webmasters e operatori del web: in un documento intitolato Crawling and Indexing raggiungibile da code.google.com alcune informazioni utili su come controllare il crawling e l’indicizzazione del proprio sito e strumenti per indirizzare il crawler verso le pagine desiderate, magari non ancora indicizzate. In particolare, il documento spiega come utilizzare le direttive contenute nei robots.txt, nei meta tag “robots” e negli header http X-Robots-Tag.

Ecco il link: http://code.google.com/intl/it-IT/web/controlcrawlindex/

LinkedInDeliciousEmailFacebookCondividi