Categorized | Senza categoria

Pagine non indicizzate: robot.txt

Posted on 11 aprile 2009 by Nazaxx91


Molti neo bloggers iniziano ad esplorare il mondo di Google e capita spesso che ci siano dei problemi soprattutto quando si avvicinano per la prima volta ad uno strumento molto potente della Google chiamato “Strumenti per i webmaster“.
Grazie a tale strumento Google permette ad un sito o un blog di verificare eventuali problemi con il codice html, di verificare le statistiche degli iscritti e soprattutto di verificare se esistono eventuali problemi con le pagine che vengono indicizzate. Oggi parleremo di un problema molto importante e soprattutto ricorrente : i file robot che limitano l’indicizzazione nei motori di ricerca. Cosa sono questi file? Sono solo delle regole che i crawler applicano al nostro sito ( in generale alle pagine del nostro sito) e che “controllano” l’indicizzazione del nostro sito nei motori di ricerca. Un blogger raramente inserisce nella propria struttura file robot che impediscono l’indicizzazione nei motori di ricerca ma capita spesso che Google in automatico inserisca delle restrizioni nell’indicizzazione delle nostre pagine. Come evitare queste scocciature?
Per prima cosa vi consiglio di inserire un metatag( un metatag va inserito nella struttura del vostro blog : tanto per capirci dovrete recarvi in layout, modifica html e inserirlo dopo la stringa head). Questo metatag da inserire cerca di evitare restrizioni da parte del motore di ricerca e di indicizzare tutte le pagine del vostro sito. (Per visualizzarlo recatevi a questo sito)
Dovrete scegliere voi cosa impostare ( se il blog non è stato mai indicizzato nei motori vi conviene impostare all che consente di indicizzare tutte le pagine).
A volte inoltre bisogna riconoscere se esiste veramente un problema : infatti può capitare che cambiando il titolo dei post vengano inseriti i vecchi post nella lista dei robots ma non c’è assolutamente da preoccuparsi. Infine accade che gli url delle etichette abbiano delle restrizioni che non possiamo evitare : non c’è da preoccuparsi poichè da sempre i labels(etichette) sono limitate da file robot.txt. Il mio consigilio è quello di stare sempre molto attenti alla manutenzione del proprio sito e di evitare problemi che possano ridurre il traffico giornaliero. Se poi Google inserisce delle restrizioni dobbiamo solo essere attenti ad individuare il problema e poi a risolverlo con molta pazienza( anche se capisco che in questi casi è davvero poca). Buona navigazione!

1 Comments For This Post

  1. Anonymous Says:

    Grazie mi hai risolto un grande problema sui robot.txt sui labels..davvero grazie

Leave a Reply