Købmand Herman Johansen overtog Olsgården i 1910. Han river den gamle Skt. Olsgård ned i 1928 og opfører den nuværende bygning på hjørnet af Skt. Olsgade og Dronning Margrethesvej.