Carlos Julio Rospigliosi González-Vigil (1879-1938) construye el Castillo hacia fines de los años 20s. con el objetivo de alojar al Rey Alfonso XIII de España,quién debía visitar Lima en 1930,pero el viaje fue cancelado. Fue la vivienda de Rospigliosi hasta su fallecimiento.
