Esatto, fai attenzione però che il tuo client FTP non sovrascriva le cartelle per intero, ma sostituisca soltanto i file aggiornati.
In caso contrario ti ritroveresti con un'installazione di Joomla non funzionante (si rimedia ma è meglio prevenire che curare)
Fai una prova per verificarlo.