+ Rispondi alla Discussione
Risultati da 1 a 9 di 9

[robots.txt] - dubbio su allow o disallow

Ultimo Messaggio di fivepoints il:
  1. #1
    User
    Data Registrazione
    Oct 2006
    Località
    langhe
    Messaggi
    34

    [robots.txt] - dubbio su allow o disallow

    ciao a tutti,
    vorrei specificare in modo esplicito nel robots.txt di indicizzare tutte le pagine.
    io farei così:

    User-agent: *
    Disallow:

    il mio dubbio è: il disallow impostato così dice in automatico al motore di ricerca di indicizzare tutte le pagine oppure anzichè "Disallow: " occorre inserire "Allow: /"? qual'è il più standard?

  2. #2
    User L'avatar di YouON
    Data Registrazione
    Jul 2007
    Località
    Milano
    Messaggi
    466
    se non metti niente lui indicizza ... non sono un esperto di robots.txt ma credo che come regola valga.

  3. #3
    User
    Data Registrazione
    Oct 2006
    Località
    langhe
    Messaggi
    34
    si lo so, però volevo sapere quale modo è più giusto utilizzare nel caso in cui uno voglia comunque inserire il file robots.txt.

    grazie

  4. #4
    Moderatore L'avatar di claudioweb
    Data Registrazione
    Jul 2005
    Località
    Salento
    Messaggi
    3,703
    Ciao

    La direttiva allow non esiste. I motori pescano in automatico tutto ciò che non è escluso.

    Nel caso tu voglia inserire il file robots.txt per varie ragioni (evitare errori nei log ecc.) puoi inserirlo vuoto oppure esattamente come indicato da te.

    Codice:
     User-agent: *
    Disallow:

    Si avvicina la Festa della Mamma.

  5. #5
    Esperto L'avatar di pieropan
    Data Registrazione
    Apr 2006
    Località
    Aree tribali del nordest
    Messaggi
    230
    Citazione Originariamente Scritto da claudioweb Visualizza Messaggio
    Ciao
    La direttiva allow non esiste. I motori pescano in automatico tutto ciò che non è escluso.
    Ciao, mmmh... questo è un caso in cui una affermazione è sostanzialmente vera e falsa allo stesso tempo.
    Mi spiego: la direttiva allow esiste ma, al di la del fatto che non tutti i bot la capiscono, non ha la stessa "sostanza" della direttiva disallow, non sono equivalenti e di segno inverso come potrebbe sembrare.

    Il robots.txt nasce col segno meno davanti, nasce per vietare. Quindi è vero che è permesso tutto quello che non è vietato, come dice claudioweb.
    Per questioni di praticità è stata poi aggiunta la direttiva allow, che però ha senso solo se _segue_ un disallow, ovvero la tal cartella è vietata tranne, poniamo, il tale file.

    User-agent= googlebot
    Disallow= /talecartella/
    Allow= /talecartella/talefile.htm

    Occhio che Allow NON è parte del protocollo robots.txt (e quindi formalmente non esiste, se non per i bot la accettano) e sarebbe bene non abusarne. Ad esempio un robots.txt come questo:

    User-agent= googlebot
    Allow= /

    ... manda in pappa googlebot, anche se per lui Allow è una direttiva esistente.

    Ciao.
    Pieropan

  6. #6
    Utente Premium L'avatar di ideasiti
    Data Registrazione
    Mar 2007
    Località
    Acqui Terme
    Messaggi
    252
    Ciao... volevo chiarire un dubbio
    Per disabilitare tutto da tutti i motori è giusto scrivere?

    Codice HTML:
    User-agent:*
    Disallow: /
    Studio Laura Norese - Creazione_Siti

  7. #7
    Esperto L'avatar di pieropan
    Data Registrazione
    Apr 2006
    Località
    Aree tribali del nordest
    Messaggi
    230
    Citazione Originariamente Scritto da ideasiti Visualizza Messaggio
    Ciao... volevo chiarire un dubbio
    Per disabilitare tutto da tutti i motori è giusto scrivere?

    Codice HTML:
    User-agent:*
    Disallow: /
    No, questo è quello corretto:

    User-agent: *
    Disallow: /

    Son dettagli, ma sono tutto.


    Ciao.
    Pieropan

  8. #8
    Moderatore L'avatar di claudioweb
    Data Registrazione
    Jul 2005
    Località
    Salento
    Messaggi
    3,703
    Ciao,

    Grazie Piero per l'aggiunta

    Citazione Originariamente Scritto da pieropan Visualizza Messaggio
    Ciao, mmmh... questo è un caso in cui una affermazione è sostanzialmente vera e falsa allo stesso tempo.
    Mi spiego: la direttiva allow esiste [...]
    Occhio che Allow NON è parte del protocollo robots.txt (e quindi formalmente non esiste, se non per i bot la accettano) e sarebbe bene non abusarne.
    Citazione Originariamente Scritto da fivepoints Visualizza Messaggio
    qual'è il più standard?
    In effetti devo rettificare... Dicendo che nello standard non esiste allow... Poi Google fa un po' quel che gli pare...

    Si avvicina la Festa della Mamma.

  9. #9
    User
    Data Registrazione
    Oct 2006
    Località
    langhe
    Messaggi
    34
    grazie infinite per le precisazioni

+ Rispondi alla Discussione

^ Permessi di Scrittura

  • Tu non puoi inviare nuove discussioni
  • Tu non puoi inviare risposte
  • Tu non puoi inviare allegati
  • Tu non puoi modificare i tuoi messaggi
  •  
  • Il codice BB è Attivato
  • Le faccine sono Attivato
  • Il codice [IMG] è Attivato
  • Il codice [VIDEO] è Attivato
  • Il codice HTML è Disattivato
  • Trackbacks Attivato
  • Pingback Attivato
  • Refback Attivato

SEO by vBSEO 3.6.0 PL2 ©2011, Crawlability, Inc.