Fue erigido por los primeros Condes de Alba de Liste como ofrenda por la liberación de D. Enrique Enriquez, hijo de estos, que cayó prisionero de los portugueses en la batalla de Toro en 1476. Fue morada de los Reyes Católicos en 1497 y sede de la comunidad franciscana de la cual salieron decenas de frailes que participaron en la evangelización del Nuevo Mundo. Su estado ruinoso viene en decadencia desde la Desamortización en 1835. Más información en la web turismogarrovillas.com