Robot.txt e tag

[toba86]

salve a tutti,
è possibile impostare sul robot una regola che generalmente escluda tutti i tag tranne uno.
vorrei un disallow per sito/tag/
e un allow per sito/tag/tagdaindicizzare


è possibile?
Grazie

[maicolstaip]

Ciao toba86,
per quel che ne so, robot.txt si basa sulle directory e/o files del tuo sito.
Non puoi usarlo per i tags.
Ciao!

[toba86]

io sapevo che potevi controllare sia directory che singoli url...

[maicolstaip]

Sì, un tag non è nè una directory, nè un file, nè un url

[toba86]

cioè se io escludo sito.it/tag/
google non dovrebbe indicizzarmi nessun indirizzo tip sito.it/tag/xxx, no?

[maicolstaip]

Scusami, ma cosa intendi con "tag" ?

[toba86]

l'indirizzo che si genera utilizzando i tag...

[ZioPal]

Ciao taba86,
in effetti non è che sia molto chiaro quello che  chiedi , tieni presente che puoi utilizzare Allow: per escludere dall'esclusione (è contorto ma è così), un contenuto della cartella che hai escluso con Disallow:.

Codice: [Seleziona]

User-agent: *
Allow: /temp/esempio2.html
Disallow: /temp/ Per assolvere alle direttive standard dei Crawler che riconoscono l'attributo Allow:, che comprendono l'esclusione di un file dal blocco generale della cartella, la direttiva Allow:/ deve essere posta al di sopra della Disallow: utilizzata in coppia

Maurizio ZioPal

[toba86]

Grazie ZioPal,
in effetti non mi sono spiegato un granché, avrei dovuto tralasciare il fatto che si trattava di tag.


Quindi, stando a quanto mi scrivi se volevi escludere generalmente la directory /tag, lasciandone alcuni indicizzabili dovrei fare così:




Allow: /tag/esempio2.html
Allow: /tag/esempio3.html
Allow: /tag/esempio4.html
Disallow: /tag/

Grazie!

[ZioPal]

Ciao taba86,
però se continui a partlare di tag confondi (visto che i tag sono una cosa diversa dalle directory), parla della directory /tag.

Allow: /tag/esempio2.html
Allow: /tag/esempio3.html
Allow: /tag/esempio4.html
Disallow: /tag/

Si, la sintassi dovrebbe essere quella giusta.

Maurizio ZioPal

[toba86]

ok grazie mille!