La construcción del edificio de la actual Residencia Universitaria Diego Muñoz Torrero (2023) fue iniciada en la década de 1940, en terrenos cedidos por el Ayuntamiento de Cáceres y la Secretaria General del Movimiento. La Delegación Provincial de Auxilio Social de Cáceres planeaba la construcción de un Hogar Cuna y Hogar Infantil. En esa década, la Diputación Provincial de Cáceres recaudó cantidades a los varios ayuntamientos de la provincia, a través de aportaciones voluntarias ciudadanas, para financiamiento de la construcción. A pesar de se empezar la construcción de la estructura con financiación a través de la "Ficha Azul" (donaciones hechas al Auxilio Socia) , eses fondos fueron insuficientes para continuar las obras, quedando abandonada por casi veinte años y transformándose en un refugio para pobres y indigentes (Archivo Diputación de Cáceres). Según informaciones compartidas en entrevista, la estructura fue usada por comerciantes del mercado del Rodeo, ubicado en la proximidad.

En 1960, el edificio fue adquirido por la Diputación Provincial de Cáceres. El proyecto original de la década de 1949 es del arquitecto del Departamento de Construcciones de la Delegación Nacional de Auxilio Social, Antonio Navarro Sanjurjo, que supervisiono las obras de construcción en los años de 1950. Se pretendía instalar el Colegio de San Francisco y una escuela de formación profesional en el edificio, idea abandonada pocos años después. En 1965 se realizan nuevas obras y se decide la utilización del edificio como Colegio Menor para acoger chicos estudiantes de centros de enseñanza de Cáceres que vengan de distintos locales de la provincia. Recibe la designación Colegio Menor Donoso Cortés y fue cedido a la Secretaría General del Movimiento (Delegación General de Juventudes) en 1967. El edificio está listo para comenzar el curso escolar de 1968-1969. Según relatos de antiguos alumnos, al final de los años setenta, fueron integrados en el colegio aproximadamente 100 chicos del hospicio de huérfanos ubicado en el antiguo Convento de San Francisco, que se encontraba en obras de reforma.

El colegio es incorporado en el Patrimonio del Estado en 1978, pasando a depender del Instituto de la Juventud del Ministerio de Cultura. En esa altura ahí se cría la Escuela Oficial de Idiomas de Cáceres, con cursos de inglés en verano. En 1982, el edificio se convierte en residencia juvenil para jóvenes de la región que se dirigen a Cáceres para hacer la Educación General Básica (EGB), con la transferencia de competencias para la Consejería de Educación y Cultura de la Junta de Extremadura. En los años noventa, se transforma en residencia universitaria mixta. Desde 2016, el edificio tiene capacidad para 170 residentes.

La demanda creciente de estudiantes universitarios lleva a la construcción de un nuevo edificio para dormitorios, comunicante con el edificio primitivo por un corredor acristalado. Se trata de un proyecto de los arquitectos D. J. Ramón Zorita y Ignacio Dols, inaugurado en 1994. Hubo nuevas reformas y mejoras de infraestructuras en los años 2000.