Asger Jorn er født i 1914 den 3. marts i Vejrum i Vestjylland og fik navnet Asger Oluf Jørgensen. Forældrene Lars Peter og Maren Jørgensen var begge læreruddannede - Maren fra Th. Langs Seminarium i Silkeborg. Familien var engageret i den indremissionske bevægelse, hvilket prægede Jorns barndom med KFUM, søndagsskole og missionsmøder. I 1921 flyttede familien til Kalvehave på Sydsjælland, men flyttede allerede i 1924 tilbage til Jylland, hvor Lars Peter blev lærer i Aulum ved Herning. Imidlertid døde Lars Peter allerede i 1926 af følgerne af en bilulykke og efterlod Maren med seks børn og en lille enkepension til at forsørge dem.
'''Til Silkeborg'''
I 1929 flyttede Maren familien til Silkeborg for at give børnene de bedste muligheder for at uddanne sig. Familien levede under små kår i den nye by - men Jorn kastede sig over byens mange tilbud, ikke mindst biblioteket og aviserne. Jorn havde et godt hoved og det var oplagt at læse videre - En sygdom forhindrede ham dog i at begynde på gymnasiet, men fra efteråret 1930 blev han optaget på [[Vinthers Seminarium]] i Silkeborg på dispensation da man egentlig skulle være 18.
Seminarietiden gav Jorn mulighed for at dyrke et væld af aktiviteter. Han engagerede sig i både KFUM, blev kommunist og udviklede sine intellektuelle og kunstneriske evner. Det kunstneriske var fællesnævner for det hele. Det var i høj grad gennem billeder og figurer han bidrog til de forskellige aktiviteter. Den lokale billedkunstner [[Martin Kaalund-Jørgensen]] hjalp og inspirerede den unge kunstnerspire og fik ham blandt andet til at debutere på Frie jyske maleres udstilling på [[Silkeborg Bibliotek]].
Tidens mange indtryk og aktiviteter blev dog mærket af endnu en tragisk begivenhed i familien. Jorns storebror Henning døde pludseligt i 1933 af en hjertefejl.