3.4 Pagine non trovate 404 o accesso negato 403 su webmaster tools, strana formattazione e user. SEO

[Agnello]

Continuo a scrivere dei vari problemini che affliggono il mio forum, sperando di ricevere consigli che possano essere utili anche agli altri.

Sulla pagina di webmaster tools, in relazione agli errori di scansione, ogni tanto trovo svariate manciate di errori 404 e 403.

 

1)) 404

 So che non sono errori importanti ma vorrei capire il perche si manifestano. Sulla guida di google viene detto
 

Googlebot cerca di visitare una pagina che non esiste, perché è stata eliminata o ridenominata senza reindirizzamento dell'URL precedente a una nuova pagina, oppure a causa di un errore ortografico in un link.

 

Ecco come sono gli errori che vedo

http://forum.dominio.org/user/L-L/,404,,20/09/14,Non trovato,Desktop,16/11/14http://forum.dominio.org/tags/members/Megaphobema%252525252525252BRobustum%252525252525252BVeyron/,404,,29/10/14,Non trovato,Desktop,20/11/14http://forum.dominio.org/tags/core/Megaphobema%252525252BRobustum%252525252BVeyron/,404,,22/10/14,Non trovato,Desktop,20/11/14http://forum.dominio.org/tags/forums/scemate%2525252Bonline/,404,,30/10/14,Non trovato,Desktop,16/11/14http://forum.dominio.org/tags/forums/maturit%252525252525252525E0/,404,,17/11/14,Non trovato,Desktop,19/11/14http://forum.dominio.org/tags/forums/per%2525252525252525F9/,404,,15/11/14,Non trovato,Desktop,15/11/14http://forum.dominio.org/tags/forums/fiere%25252525252525252Bitaliane/,404,,15/11/14,Non trovato,Desktop,15/11/14http://forum.dominio.org/tags/forums/per%25252525252525F9/,404,,15/11/14,Non trovato,Desktop,15/11/14http://forum.dominio.org/tags/calendar/aracnofauna/,404,,16/11/14,Non trovato,Desktop,16/11/14http://forum.dominio.org/tags/core/aracnofauna/,404,,16/11/14,Non trovato,Desktop,16/11/14http://forum.dominio.org/tags/members/aracnofauna/,404,,16/11/14,Non trovato,Desktop,16/11/14http://forum.dominio.org/tags/forums/palude%25252Bdi%25252Bonara/,404,,17/11/14,Non trovato,Desktop,17/11/14http://forum.dominio.org/tags/calendar/cesena%252525252525252B2013/,404,,22/10/14,Non trovato,Desktop,20/11/14http://forum.dominio.org/tags/core/ivo/,404,,16/11/14,Non trovato,Desktop,16/11/14http://forum.dominio.org/tags/core/david%25252Battenborough/,404,,17/11/14,Non trovato,Desktop,17/11/14http://forum.dominio.org/tags/forums/selezione%2525252525252Bartificiale/,404,,19/11/14,Non trovato,Desktop,19/11/14

La gran parte sono errori dei tags
Se prendiamo questa pagina non trovata

http://forum.dominio.org/tags/forums/palude%25252Bdi%25252Bonara/,404,,17/11/14,Non trovato,Desktop,17/11/14

vediamo che in realtà la pagina funziona, unico problema sono i simboli + che vengono trascritti come %25252B

http://forum.aracnofilia.org/tags/forums/palude+di+onara/

Succede anche che le lettere accentate vengano lette come %252525252525252525E0 
etc
Come evitare questi errori 404?
 
Ci sono anche altri errori 404, tipo riguardo le pagine del profilo utenti o altri che riguardano calendario o core. Qualcuno ha idea su come risolvere questi?

 

2)) 403

Di solito ho la pagina relativa ai 403 piena di errori, tutti riferiti ai profili utente.

http://forum.dominioa.org/user/6553-manuel/,403,,16/11/14,Accesso negato,Desktop,16/11/14http://forum.dominioa.org/user/31565-gattone/,403,,15/06/14,Accesso negato,Desktop,17/11/14http://forum.dominioa.org/user/31491-argia/,403,,16/11/14,Accesso negato,Desktop,16/11/14http://forum.dominioa.org/user/31391-arclight/,403,,16/11/14,Accesso negato,Desktop,16/11/14http://forum.dominioa.org/user/16620-aracnoman/,403,,15/11/14,Accesso negato,Desktop,15/11/14http://forum.dominioa.org/user/31134-dorylus/,403,,17/11/14,Accesso negato,Desktop,17/11/14http://forum.dominioa.org/user/17048-yuri/,403,,16/11/14,Accesso negato,Desktop,16/11/14

Infatti solo i loggati possono vedere i profili utenti e quindi quando googlebot tenta di accedere riceve un errore di accesso. Se inserissi /user come restrizione sul robots eviterei tutti questi errori o google li segnalerebbe lo stesso?

Modificato 22 Novembre 2014 da Agnello

[Agnello]

nessuno?

[BomAle]

Se inserissi /user come restrizione sul robots eviterei tutti questi errori o google li segnalerebbe lo stesso?

si basterebbe una regola per /user nel robots.txt per evitare di fargli scansionare e quindi generare avvisi...

stessa cosa per /tags

 

nelle pagine vedo <meta charset="iso-8859-1" /> potresti impostare uft-8?

[Agnello]

Dove? Potrei aver problemi di accenti e cavoli vari?

 

per il resto ho inserito nel robots

 

Disallow: /user/
Disallow: /tags/
Disallow: /cache/
Disallow: /admin/
Disallow: /converge_local/
Disallow: /hooks/
Disallow: /ips_kernel/

etc....

 

Non vorrei però che l'impedire i tags riduca l'indicizzazione...

Modificato 29 Novembre 2014 da Agnello

[BomAle]

Non vorrei però che l'impedire i tags riduca l'indicizzazione...

ricordo che avevamo ridotto il numero dei ping a:

http://rpc.pingomatic.com/http://api.my.yahoo.com/RPC2http://api.moreover.com/ping

durante l'invio del topic comunque viene indicizzato, senza dover aspettare la successiva scansione della sitemap.

stesso principio viene fatto con ip.content per articoli, e album nella galleria (non ho verificato però)

 

occorre tentare con utf-8 per il charset, perchè quel link lo avrà preso dalla sitemap (vero?)

[Agnello]

Non so se gli url provengono dalla sitemap o meno. Vorrei evitare problemi lato utente nel cambiare il set di caratteri. Se mi dici che non ci sono rischi procedo. Ho gia avuto il mio periodo di lettere accentate e simboli in aramaico.

Modificato 29 Novembre 2014 da Agnello

[najaru]

sempre backup prima di fare cose strane  mi raccomendooooooooooo