Oprindeligt var der ikke noget torv her, men kun et gadeforløb. Det var [[Estrupsgade]], som fra 1871 kom til at gå fra banegården og skråt ned til Nygade og til den senere [[Hostrupsgade]]. Et markant brud på byens rektangulære gadenet.
Efterhånden som en række skolebygninger skød op, var der god basis for at kalde pladsen mellem bygningerne for Skoletorvet, men navnet er først registreret i 1902. Mod syd var Th. Langs Skole at finde allerede fra 1886 og mod vest opførtes i 1889 [[Silkeborg Tekniske Skole]] (fra 1976-1993 [[Medborgerhuset]], i dag [[Kastanjehuset]], lokalpsykiatri). Fra 1890 havde [[Silkeborg Seminarium]], [[Kirkeskovs Realskole]] og Ungdomsskolen [[Kornmod]] til huse i bygninger på nordsiden af pladsen og på hjørnet af Hostrupsgade og i 1899 kom [[Silkeborg Højskolehjem og Hotel|Højskolehjemmet]] (nu [[Galleri Galerie Moderne]]) til på den østlige side.
Den mest markante (og første) bygning på Skoletorvet er Th. Langs lidt monumentale hovedbygning mod syd, der da den blev bygget i 1886 var fritliggende og rummede alle skolens funktioner. Den er tegnet af [[Anton Rosen]] og markerer starten på et samarbejde, der varede helt frem til 1924. Rosen stod således for alle skolens byggearbejder, hvilket stadig kan ses i kvarteret.