La seconda opzione (oltre a quella proposta da ramses_2th) è questa:
Aggiungi la seguente riga:#form-login{display:none;}
nel file offline.css del template protostar.Ovvio, se il tuo e un template diverso da protostar, la situazione si complica, perché può darsi che questo abbia un suo override della pagina offlline...