robots.txt

[:: Matteo ::]

Sto cercando di "risollevare" il mio sito nei motori di ricerca, e stò seguendo la vostra guida x il seo ecc.
Nell'usare i google webtools, ho notato che sarebbe utile un file robots.txt.
Ho visto che a seconda del risultato che si vuole si possono escludere/includere alcune pagine, allora la mia domanda è: per un sito "generico" fatto in Joomla quali impostazioni di base di devono usare anche per garantire una certa sicurezza?
che directory devo escludere?
grazie
(un file di esempio?)

[56francesco]

lascialo come sta,  al massimo massimo se hai aperto nella root del sito  una cartella  con dentro dei files allora inserisci nella cartella una index.html  (pagina binca 77kb)  e il nome nel file robots

se vuoi sapere a cosa serve in rete non ti sarà difficile trovare molta documentazione, ma non centra niente con quello che vuoi fare

[:: Matteo ::]

(innanzi tutto grazie...)

"inserisci nella cartella una index.html  (pagina binca 77kb)  e il nome nel file robots"
Dimmi se ho capito bene:
nella mia cartella che contiene i files devo mettere un file index.html vuoto
e devo aggiungere al file robots.txt (in disabilita) quella cartella?

Se la cartella ha i permessi 700 devo farlo uguale?

[56francesco]

nella mia cartella che contiene i files devo mettere un file index.html vuoto

sempre, in tutte le cartelle nuove che apri, e anche in quelle delle estensioni  se non la tengono già, carenza molto frequente..

e devo aggiungere al file robots.txt (in disabilita) quella cartella?

solo se apri una cartella nella root, 
se  apri una qualsiasi sottocartella in quelle di joomla non serve perchè l'istruzione disallow cartella comprende ovviamente tutte le sottocartelle e i files contenuti

[:: Matteo ::]

ma che succede se non c'è l'index.html?
(dove lo prendo uno vuoto?)

[56francesco]

succede che la cartella si apre  digitando l'indirizzo esatto nella barra e mostra il suo contenuto
non è una bella cosa, se ci fossero degli oggetti ad esempio dei  file  .pdf  .jpg  .avi ecc.  potrebbero essere tranquillamente aperti e scopiazzati ecc.. ecc..

quindi uno qualsiasi dei files .html che già ci stanno,  lo scarichi nel tuo pc e poi via ftp lo distribuisci dove serve..

[:: Matteo ::]

ma anche se i permessi della cartella sono impostati su 700 serve l'index.html?

[56francesco]

si  certo, la pagina bianca serve sempre magari fai dei test 
i permessi sono cosa diversa, inoltre 700 è abbastanza insolito,  se lo hai impostato tu ripristinalo  come era meglio non impicciarsi di certe cose della lamp  senza essere dei tecnici provetti

[:: Matteo ::]

Possiamo fare una prova assieme?

riesci a leggere questa cartella:?
http://lnx.agliocchi.it/prova/
o a leggere questo file?
http://lnx.agliocchi.it/prova/gekko1.jpg

invece proviamo quest'altra:
http://lnx.agliocchi.it/prova2/
o a leggere questo file?
http://lnx.agliocchi.it/prova2/gekko1.jpg

Grazie!...

[56francesco]

ma allora sei provetto..
 
è diverso, sposto nella sezione sviluppo..

[:: Matteo ::]

come al solito non ho capito....cioè?

[56francesco]

la sezione 1.5 è più generica e la la sezione sviluppo è per argomenti più avanzati, inoltre quel file non è specifico per joomla,  quindi  qui l'argomento troverà maggior seguito, almeno credo..
vedremo..

[mmleoni]

ciao,
 facciamo un po di chiarezza:

robots.txt è un protocollo di esclusione, quindi serve solo a dire al motore dove non andare. vi è però da dire che è invalsa la consuetudine di inserire in coda a tale file la direttiva Sitemap:, solo in questo caso si può dire che robots.txt serve ad includere delle pagine (ma si tratta di una sitemap, non di una pagina)

index.html serve ad impedire la visualizzazione del contenuto della directory ove non vi sia un altro 'default document'; ciò avverrebbe, comunque, solo se fosse indicata l'opzione indexes nella configurazione del server: cosa più unica che rara su un server di produzione.

permessi non c'entrano assolutamente niente con questo discorso (si parla di impedire il listing della directory, NON l'accesso alla stessa) quindi lasciali come stanno.

ciao,
marco

[:: Matteo ::]

come faccio a fare il listing di una directory?
Ho notato che se metto i permessi a 700 non mi fa accedere ai files che sono contenuti a meno di essere loggato. E quello per me è bene. Ma con i permessi a 700 posso listare la directory?

[mau_develop]

ma cos'è che vuoi fare?

sei partito cercando di sollevare le visite.. con il robots ??

il robots serve ai motori e agli spider per sapere come muoversi e dove non andare (ma possono non rispettare qs obbligo)

forse quello che serve a te è la mappa del sito, quella è una lista di directory e contenuti da indicizzare, la piantina di casa per chi ti visita.

il robots txt va bene così com'è e pure i permessi dei files/cartelle

M.

[:: Matteo ::]

No, è che come si dice "da un discorso annamo a n'altro"
La questionde le robots.txt l'ho capita, ho iserito solo qualche divieto in più.
Adesso mi volevo concentrare sul discorso dell'accesso alle cartelle da parte di visitatori esterni non autorizzati...e volevo capire com interdire cartelle che sono in realtà dei depositi di files

shure as hell, i'm "off topic"!! però oramai la frittata è fatta!

[mau_develop]

occhio ai pasticci,... mai avuto qs problemi con joomla... semmai i problemi li causa il server.

per ciò che non deve essere listato joomla inserisce un index.html vuoto

qualsiasi componente che installi che offre contenuti riservati è dotato di scripting a protezione di quei contenuti, basta che quella cartella contenga un index.php con uno script che guarda se la richiesta è interna o esterna..

... consiglio mio... non giocare coi permessi.

M.

[:: Matteo ::]

dove posso trovar euno di questi index.php con lo script??
"index.php con uno script che guarda se la richiesta è interna o esterna.."

[mau_develop]

aspetta però, perchè qs topic è abbastanza confusionario, si parla di mille cose e si rischia solo di fare confusione.

Se siamo qui sottointendo che si parli di Joomla e con joomla questa cosa la fa già lui o gli appropriati addons che installi.
Già durante l'installazione i permessi delle cartelle riservate e il loro accesso è gestito da joomla e dal server, tu non devi fare nulla.

Se nonstante tutto tu riesci ad accedere a contenuti protetti c'è qualcosa che non va e possono essere i permessi del server, ma dare numerini a caso senza sapere la conf del server non ha senso.

Altre cosucce possono essere fatte con l'htaccess.

M.

[:: Matteo ::]

"Altre cosucce possono essere fatte con l'htaccess" Tipo?
Perchè adesso io l'ho impostato per il SEO/SEF, ed ho messo i settaggi della guida, (sottocartella ecc).
Il SEO/SEF funziona, ma se ti dovessi dire che ho capito come funziona l' htaccess... non saprei da dove cominciare.
Può essere usato per prevenire l'accesso ad alcune cartelle?

poi si stiamo parlando di joomla, nel senso che in questo spazio di jooma.it ci sono molte risorse, ed è fatto bene. Visto che è prassi installare joomla come sistema principale per i siti internet e parallelamente installare altri sistemi, (magari media wiki, oppure CRM vari) è interessante capire come proteggere i vari componenti garantendo un opportuna visibilità al sito.

Percui cose come robots.txt, gli index.html e .htaccess sono sì generiche ma se c'è la possibilità di spiegarle bene...è il caso di approfittarne perchè alcune cose tornano sempre utili!
Magari poi si raccoglono i contributi e si mettono in una guida sulla sicurezza...