• Super User

    robots.txt

    Ho dato un'occhiata sia a vBulletin che a vBSEO, ma mi pare proprio che non ci sia il file robots.txt
    Come mai?
    Dobbiamo farlo noi?


  • Super User

    Che io sappia si, deve essere creato a mano. Poi non sò se una nuova funzione di vBSeo è stata implementata per questo scopo. 🙂


  • User Attivo

    Che io sappia si crea sempre manualmente e ti consiglio di usare questo:

    User-agent: ia_archiver
    Disallow: /

    User-agent: *
    Sitemap: htxp://sito.it/forum/sitemap_index.xml.gz
    Disallow: /forum/vbseocp.php
    Disallow: /forum/admincp/
    Disallow: /forum/clientscript/
    Disallow: /forum/cpstyles/
    Disallow: /forum/customavatars/
    Disallow: /forum/customprofilepics/
    Disallow: /forum/images/
    Disallow: /forum/modcp/
    Disallow: /forum/highslide/
    Disallow: /forum/ajax.php
    Disallow: /forum/attachment.php
    Disallow: /forum/calendar.php
    Disallow: /forum/cron.php
    Disallow: /forum/editpost.php
    Disallow: /forum/global.php
    Disallow: /forum/image.php
    Disallow: /forum/inlinemod.php
    Disallow: /forum/joinrequests.php
    Disallow: /forum/login.php
    Disallow: /forum/member.php
    Disallow: /forum/memberlist.php
    Disallow: /forum/misc.php
    Disallow: /forum/moderator.php
    Disallow: /forum/newattachment.php
    Disallow: /forum/newreply.php
    Disallow: /forum/newthread.php
    Disallow: /forum/online.php
    Disallow: /forum/poll.php
    Disallow: /forum/postings.php
    Disallow: /forum/printthread.php
    Disallow: /forum/private.php
    Disallow: /forum/profile.php
    Disallow: /forum/register.php
    Disallow: /forum/report.php
    Disallow: /forum/reputation.php
    Disallow: /forum/search.php
    Disallow: /forum/sendmessage.php
    Disallow: /forum/showgroups.php
    Disallow: /forum/subscription.php
    Disallow: /forum/threadrate.php
    Disallow: /forum/usercp.php
    Disallow: /forum/usernote.php


  • Super User

    Grazie, ma ne ho usato uno pro-forma:

    *User-agent: *
    Disallow:
    *

    Tra l'altro neanche ce l'ho la cartella forum