Fibigers hustru, [[Elfride Fibiger]], har i sin bog "Fra Provinsen" (1939) meget levende beskrevet livet i byen, blandt andet med kongebesøg og tysk indkvartering i 1864.
[[Distriktslægeboligen]], Vestergade 43, opførtes i 18561858. Her fødtes sønnen [[Johannes Fibiger]], der senere blev en kendt videnskabsmand og modtog Nobelprisen for medicin for sin kræftforskning i 1926. Der er mindeplade for ham på facaden.
Fibigersgade hed frem til [[Gadenavnsændringer_i_Silkeborg|gadenavnereguleringen]] i 1969 Fasanvej og før 1933 Blindvej indtil Nygade, der senere blev en del af Guldbergsgade.