El nombre de Colegio de los Irlandeses se debe a que había un Colegio de San Patricio, o de los Irlandeses, fundado en el año de 1592, a instancias del rey Felipe II, para albergar a los estudiantes de ese país que venían a Salamanca por la persecución inglesa a los católicos de Irlanda. En 1838, cuando los irlandeses volvieron a su colegio tras la Guerra de Independencia lo encontraron destruido (los franceses destruyeron muchos edificios universitarios y religiosos para hacer fortificaciones) por lo que se les cedió este edificio, que ocuparon hasta 1936.