Es la casa señorial más antigua de la ciudad.
Fue construida por el Abad de Santander, Pérez de Monroy a principios del siglo XIV.
Ha sufrido varias reformas y conserva su portada del gótico primario guarnecida por dos leones de alto relieve y en una de las torres el escudo nobiliario de los Carvajales.