De acordo com [[Selyse Florent]], os pais de Mance foram uma mulher comum do [[Povo Livre]] e um homem do [[Patrulha da Noite]]. {{Ref|ADWD|69}} Depois que um grupo de invasores passarem todos na espada quando Mance era criança, ele foi levado pelo [[Patrulha da Noite]] onde foi criado como um deles.{{Ref|aCoK|53}} De acordo com uma fonte semi-canônica, seu sobrenome de "Rayder" vem de essa origem. <ref>[http://awoiaf.westeros.org/index.php/A_World_of_Ice_and_Fire George R. R. Martin's A World of Ice and Fire] Mance</ref>
Um Patrulheiro da [[Torre Sombria]], Mance muitas vezes cantava sobre [[Bael|Bael, O Bardo]] depois de retornar dos patrulhas [[Para Lá da Muralha|Além do Muralha]].{{Ref|ACOK|53}} Quando [[Senhor Comandante da Patrulha da Noite|Senhor Comandante]] [[Senhor Comandante Qorgyle|Qorgyle]] viajou para [[Winterfell]] para se encontrar com o Lorde [[Eddard Stark]], Mance montou escolta e conheceu o jovem [[Robb Stark]] e [[Jon Snow]]. {{Ref|aSoS|7}}
Mance foi atacado e gravemente ferido por um [[Gato-da-sombra]] enquanto estava em uma exploração [[Para Lá da Muralha|Além do Muralha]], onde foi curado por uma mulher selvagem. Enquanto ele se recuperava, ela reparou seu manto rasgado com amostras de um lindo tecido de ceda vermelho de [[Asshai]], que era o tesouro da pobre mulher (Ela conseguiu o tecido com comerciantes). Em seu retorno à [[Muralha]], Sor [[Denys Mallister]] exigiu que Mance trocar sua capa remendada por uma das capas negras. Esta violação a sua liberdade o fez abandonar a [[Torre Sombria]] {{ref|ACOK|53}} e ir viver com os [[Povo Livre|Selvagens]] do jeito que quisesse. {{Ref|aSoS|7}}