V budove galérie bolo aj Múzeum hygieny
Vodná kasáreň, ktorú postavilo mesto na brehu Dunaja v rokoch 1759 až 1763, aby sa v nej ubytovalo vojsko Márie Terézie, slúžila vojakom skoro dvesto rokov. Po regulácii Dunaja a výstavbe pevného nábrežia sa budova ocitla veľmi blízko toku rieky a bola prekážkou pri vybudovaní cesty pozdĺž Dunaja. Preto sa v roku 1939 rozhodlo o jej asanácii.