Joomla.it Forum

Componenti per Joomla! => SEO => : halorock 16 Aug 2013, 21:01:50

: Errore 403: blocco del crawler GoogleBot.
: halorock 16 Aug 2013, 21:01:50
Buongiorno a tutti, ho un problema con il mio sito web: bbecopompei.it (http://bbecopompei.it)
Da strumenti webmaster noto il blocco del crawler GoogleBot.
Non ho mai avuto problemi prima del 6 agosto.
Uso pagespeed da Maggio e nel frattempo, ovviamente non ho mai modificato in alcun modo il sito.
Non sono un esperto,scusatemi.
Ecco come Google visualizza le mie pagine :
 
Googlebot ha recuperato la pagina in questo modo.
 
URL: http://www.bbecopompei.it/it/contattaci.html
 
Data: venerdì 16 agosto 2013 03:41:11 GMT-7
 
Tipo Googlebot: Web
 
Tempo di download (in millisecondi): 551
 
HTTP/1.1 403 Forbidden
Pragma: no-cache
Content-Type: text/html
X-Original-Content-Length: 147
Date: Fri, 16 Aug 2013 10:41:12 GMT
Expires: Fri, 16 Aug 2013 10:41:12 GMT
Cache-Control: max-age=0, no-cache, no-store
X-Page-Speed: 104_1_cn
Content-Encoding: gzip
Server: PagespeedRewriteProxy 0.1
Content-Length: 1702
X-XSS-Protection: 1; mode=block
Alternate-Protocol: 80:quic
 
<html>
<head><title> 403 Forbidden
</title><script type='text/javascript'>window.mod_pagespeed_start = Number(new Date());</script></head>
<body><h1> 403 Forbidden
</h1>
Access to this resource on the server is denied!
 
 
: Re:Errore 403: blocco del crawler GoogleBot.
: glukom 17 Aug 2013, 13:04:36

Buongiorno,

ho provato ora con pagespeed e restituisce un 200 ok. Hai risolto ?
La pagina era disponibile per tutti ? Se è solo per utenti registrati credo sia corretto che restituisca 403.
: Re:Errore 403: blocco del crawler GoogleBot.
: halorock 17 Aug 2013, 14:07:38
Ciao, no la pagina è pubblica.
Se controllo tra gli errori di scansione di Google Webmasters Tools trovo 129 errori 403 : accesso negato.
Se controlli simulando di essere GoogleBot vedi questo:
Non capisco cosa sia successo.
Ha funzionato tutto bene per un annetto,dal 6 agosto mi dà sempre questi errori.
Ed il sito è stato solo aggiornato con le nuove versioni di Joomla ma non modificato.


Visualizza come Google Googlebot ha recuperato la pagina in questo modo. URL: http://www.bbecopompei.it/it/come-raggiungerci.html
Data: sabato 17 agosto 2013 05:02:36 GMT-7
Tipo Googlebot: Web
Tempo di download (in millisecondi): 366 
HTTP/1.1 403 Forbidden Pragma: no-cache Content-Type: text/html X-Original-Content-Length: 147 Date: Sat, 17 Aug 2013 12:02:37 GMT Expires: Sat, 17 Aug 2013 12:02:37 GMT Cache-Control: max-age=0, no-cache, no-store X-Page-Speed: 104_1_cn Content-Encoding: gzip Server: PagespeedRewriteProxy 0.1 Content-Length: 1710 X-XSS-Protection: 1; mode=block Alternate-Protocol: 80:quic

: Re:Errore 403: blocco del crawler GoogleBot.
: halorock 19 Aug 2013, 21:23:16
Il problema era relativo a dei moduli e regole del mod_security, moduli  disabilitati dall'Host. Ora funziona correttamente.
Grazie a tutti per i consigli :-)