Quel wiki fa riferimento alla distribuzione di Joomla, cioè alle cartelle che trovi sia sul tuo pc che in remoto, una volta caricato. La distinzione in backend e frontend non fa quindi riferimento all'effettivo frontend e backend amministrativo ma alle cartelle che vedi via ftp. Nell'amministrazione non trovi cartelle ma menù a tendina per la gestione dei vari contenuti, componenti ecc.
Perciò per cambiare icone di default e accedere alla cartella images del template o di Joomla, devi aver accesso all'ftp del sito. Puoi usare il programma che hai usato per l'installazione via ftp.