• User

    robots.txt

    mi è venuto un dubbio, se metto nella directory principale del sito il file robots.txt (mi sono convinto a farlo, anche google nella sua guida oltre a voi lo consiglia), devo/posso omettere l'analogo meta tag ?

    <META NAME="ROBOTS" CONTENT="INDEX,FOLLOW">
    

    p.s. sono anche molto indeciso se rischiare e provare a usare qualche doorway, ho paura di fari più danni che altro...


  • Super User

    Ciao 🙂

    @buribus said:

    mi è venuto un dubbio, se metto nella directory principale del sito il file robots.txt (mi sono convinto a farlo, anche google nella sua guida oltre a voi lo consiglia), devo/posso omettere l'analogo meta tag ?

    <META NAME="ROBOTS" CONTENT="INDEX,FOLLOW">
    

    Anche senza inserire il robots.txt puoi tranquillamente omettere

    <META NAME="ROBOTS" CONTENT="INDEX,FOLLOW">
    

    è un elemento ormai inutile.
    Da un bel po', è inutile indicare di indicizzare una pagina.
    La logica dei motori è negativa, cioè bisogna indicare solo quello che non si deve prendere e non il contrario.

    @buribus said:

    p.s. sono anche molto indeciso se rischiare e provare a usare qualche doorway, ho paura di fari più danni che altro...

    Se vuoi usare doorway puoi farlo su un dominio di terzo livello, o su un altro dominio così non rischi di venire penalizzato sul sito principale.

    :ciauz: