A Capela de Nossa Senhora do Monte pertenceu, pelo menos desde 1191, à Colegiada de Santa Maria da Alcáçova (CUSTÓDIO, 1996, p. 71), tendo passado em meados do século XIII para a posse dos leprosos, cujo Hospital e Gafaria, da invocação de São Lázaro, foi instituído por D. Afonso II em data próxima, ficando-lhe a capela anexa. Entre o final do século XIII e o início do século XIV, e após contenda judicial entre os ocupantes da Gafaria e os cónegos de Santa Maria da Alcáçova, os primeiros foram forçados a deixar a zona, próxima do Paço Real, e reinstalaram o Hospital e uma ermida fora da Vila, no Cerco de São Lázaro.