nuovo google bot?

[titan]

ho ricevuto sul mio sito alcune visite:

user agent: 'Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)'

ip: 66.249.66.50
host: crawl-66-249-66-50.googlebot.com

l'user agent usato dal bot, e' comprensivo degli apici :O :O

[paocavo]

Effettivamente dal 17 Agosto ad oggi stanno succedendo cose strane:
1) Compare la versione 5 del Crawler G. Desktop
Mozilla/5_0 (compatible; Google Desktop)
2) Compare:
"Mozilla/5.0 (compatible; googlebot/2.1; +http://www.google.com/bot.html)"
Che differisce dall'usuale:
"Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)"
solo per la "g" di googlebot (che dovrebbe essere in maiuscolo)
3) Segnalo una attività crescente di:
"Feedfetcher-Google; (+http://www.google.com/feedfetcher.html)"
...ma questo non credo sia rilevante in quanto è un crawler non automatico ma esplicitamente "mandato" da qualche mio visitatore che ha personalizzato la sua Home di GG con i miei Feeds (chi è il pazzo che fa cio? )

[titan]

quel "googlebot/2.1 (+http://www.google.com/bot.html)" l'ho trovato anche io. unica cosa strana era l'ip (65.57.245.11).

ho trovato in giro un thread dove si parlavano di visite da parte di questo ip e poi una penalizzazione del PR, ma non sapevano se le due cose fossero collegate tra di loro.

[paocavo]

In effetti non si trattava di crawler di GG ma di qualcun'altro che si spaccia per lui (?):

User Agent: Mozilla/5.0 (compatible; googlebot/2.1; +http://www.google.com/bot.html) googlebot@google.com

IP: 66.230.157.90

PS: ha visitato solo la Home Page

Confermo quanto detto infatti cercando "66.230.157.90" su GG si ha:
----------------------------------------------------------------------------
[...]
Another GoogleBot wannabe - [ Traduci questa pagina ] #:3036498, 8:06 pm on Aug. 6, 2006 (utc 0). Mozilla/5.0 (compatible; googlebot/2.1; http://www.google.com/bot.html) (googlebot@google.com) 66.230.157.90 ...
www.webmasterworld.com/search_engine_spiders/3036496.htm - Pagine simili
[...]

PS: Non credo proprio che GG utilizzi "particolari" user-Agent per penalizzare un sito (o il suo PR). sarebbe troppo! (...penso al cloacking)

[titan]

ammesso e non concesso che quell'ip sia di google, potrebbero magari fare un controllo sul cloacking & c. anche se secondo me si tratta solo di un user agent un po fake :P


visto che sei ferrato in materia, ti risultano visite da adsense (almeno credo) tramite un proxy di yahoo??

piu' esattamente:

ip:216.109.121.41
hostroxy1.search.dcn.yahoo.net
user agent: Mediapartners-Google/2.1 (+http://www.googlebot.com/bot.html)

ip:216.109.121.41
hostroxy1.search.dcn.yahoo.net
user agent:Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 4.0), Mediapartners-Google/2.1

[paocavo]

Visit_by >> IP Address = 216.109.121.41
----------------------------------------------------------------------
No records found!

Ad ogni modo leggendo il forum ([ Traduci questa pagina ] tradotto in maniera barbara da GG) linkato nel mio precedente post si parla dell'eventualità che gli spider di GG possano "strisciare" attraverso proxy esterni a GG....

[titan]

mio modestissimo parere personale, credo che le visite in arrivo da proxy vari, siano piu' che altro visite da spambot o roba simile.

non penso che google abbia bisogno di proxy.

al limite potrebbe arrivare la visita 'normale' dalla classe assegnata a google.

sto invece notando che sono aumentate le visite attraverso il servizio di traduzione. di solito sono a gruppi, tutte su pagine diverse e richieste in un periodo molto breve tra loro.

[paocavo]

titan

...
non penso che google abbia bisogno di proxy.
...

concordo.

titan

sto invece notando che sono aumentate le visite attraverso il servizio di traduzione. di solito sono a gruppi, tutte su pagine diverse e richieste in un periodo molto breve tra loro.

Buon per te, evidentemente hai scritto buoni contenuti, interessanti anche all'estero (ed a gg.com)

[titan]

veramente pensavo piu' a qualche cosa che succhia le mie pagine attraverso il traduttore di google.

x esempio, ci sono alcuni siti che permettono la navigazione di g su tutte le pagine, ma se provi andarci direttamente ti chiedono la registrazione. quindi..... o ti registri o usi google e di conseguenza qualcuno potrebbe usarlo come una sorta di proxy (anche se da me non ci vuole nessuna registrazione).

[paocavo]

titan

veramente pensavo piu' a qualche cosa che succhia le mie pagine attraverso il traduttore di google.

x esempio, ci sono alcuni siti che permettono la navigazione di g su tutte le pagine, ma se provi andarci direttamente ti chiedono la registrazione. quindi..... o ti registri o usi google e di conseguenza qualcuno potrebbe usarlo come una sorta di proxy (anche se da me non ci vuole nessuna registrazione).

...e quindi ti sei risposto da solo! non si tratta di "sfruttamenti" del gg translator.

[titan]

x quel che riguarda il 'translator' non e' che mi volessi rispondere da solo, volevo piu' che altro sapere, se anche da te si verificano gli stessi accessi. )

[paocavo]

Gli "stessi accessi" è un pò difficile!
Se ti riferisci ad un incremento temporaneo degli accessi provenienti da GG-translator allora la risposta è negativa. Non noto nulla di strano.

[toninosite]

Come faccio ad ottenere il nome dell' host:

AD ESEMPIO:

crawl-66-249-66-50.googlebot.com

[paocavo]

Basta una query DNS, ad esempio da linea di comando:

c:\>nslookup 66.249.66.50
 
...
Nome:    crawl-66-249-66-50.googlebot.com
Address:  66.249.66.50
 
c:\>

[toninosite]

si può fare da php ??