si chiama favicon.ico
è una immagine particolare, se hai the-gimp la fai semplicemente ridimensionato qualsiaisi immagine di qualunque formato a 32x32 pixel oppure 64x64 ed esportandola semplicemente con salva come e per nome gli dai favicon.ico
(questo almeno in un so ubuntu con win non saprei ma credo sia uguale)
se non hai the-gimp e non vuoi installarlo allora ci sono dei tool in rete che fanno la stessa cosa
per saper dove sta e quindi dove devi sovrascrivere con la tua, con firefox fai strumenti, informazioni sulla pagina, media e trovi tutto