Sparekassen havde kun åbent en gang om ugen - på den såkaldte "sparekassedag", hvilket var onsdag kl. 11-12. Her mødtes bestyrelsen - som alle var med i direktionen og som sådan at betragte som direktører - for at ordne de fornødne forretninger. Bestyrelsens arbejdet var ulønnet de første mange år. Bestyrelsen var ligeledes i mange år selvsupplerende.
Silkeborg Spare- og Laanekasse holdt i årene 1860-1873 til på byens Rådhus (i dag det gamle rådhus), men i 1873 overtager overtog sparekassen Hammers ejendom, Vestergade 3. Sparekassen opførte i 1883 en fornem enetagesbygning på adressen - tegnet af Anton Rosen.
Sparekassen udvider sin åbningstid til alle hverdage i 1895 - men fortsat kun en time om formiddagen kl. 11-12. Fra 1911 udvider man åbningstiden med en time om eftermiddagen.
Silkeborg Spare- og Laanekasse river bygningen fra 1883 ned i 1933 og opfører en ny funkisbygning tegnet af den lokale arkitekt Knud Sørensen. Samtiden lagde især mærke til kobbertaget og til de to altaner ud mod Vestergade. Med den nye bygning fik sparekassen egentlig frontbetjening af publikum. Bygningen er stadig i 2010 en velkendt del af bybilledet i Vestergade.
Silkeborg Sparekasse var en veldreven og stabil virksomhed. C.L. Albrechtsen blev ansat i 1914 som eneste ansatte med titel af bogholder. Da Sparekassen i 1932/33 skulle tegnes af en ansat direktør overtog C.L. Albrechtsen denne post. C.L. Albrechtsen var direktør i årene 1933-1960, hvorefter sønnen Kai Albrechtsen så at sige arvede den i årene 1960-1975, hvor så Sigurd Rasmussen overtog posten frem til 1996.