Comenzando como simple hospicio en el año 1612, dos años más tarde los frailes consiguieron la licencia del Cardenal Sandoval para elevarlo a la categoría de colegio. En el año 1674 terminaron las obras de un nuevo edificio, mientras que la iglesia se acabó de contruir en el año 1683. Tras la desamortización pasó a usarse como Escuela Militar de Equitación y Depósito de Sementales. En la actualidad es sede de la Fundación Colegio del Rey.