In effetti il sito che hai linkato è fatto con WP, ma, a parte questo "dettaglio", quella che vedi nel sito non è esattamente una galleria immagini, ma - tecnicamente e come sta scritto anche nella pagina del sito - un "portfolio".
In questo momento non me ne viene in mente nessuno con l'effetto di visualizzazione che vuoi tu, ma cerca nella JED, che tra free e a pagamento di estensioni portfolio (alcune davvero fantastiche) hai di che scegliere.
Categoria estensioni portfolio sulla JED.