Come detto da odino, è possibile.
Rinomini la cartella, con un editor collettivo (tipo notepad++ e plugin di ricerca, ad esempio), ti cerchi tutti i riferimenti all'interno dei file che siano
administrator
/administrator
administrator/
/administrator/
(meglio andare ad uno alla volta, in modo da tenere sotto controllo quello che stai facendo) ed effettuare le sostituzioni.
Ovviamente, non bisogna scordarsi di fare lo stesso lavoro con qualsiasi tipo di estensione intendi installare.
Ancora più ovviamente, fa un backup di tutto
Sinceramente, però, credo si possa tentare con qualche stringa di htaccess che reindirizzi a /administrator le chiamate da url che siano, ad esempio /tuttopippo, lasciando cadere in 404 le chiamate da url che puntino su /administrartor.
In questo modo, le chiamate "interne" potrebbero rimanere come stanno