En épocas pasadas Portillo de Soria perteneció al señorío del Marques de Zafra y aquí tenía un palacio, en la actualidad hay restos del palacio del Marqués de Zafra, todavía podemos encontrar en él una pared y un muro almendrado.
Como edificaciones son de relevancia la Iglesia parroquial de San Miguel Arcangel y la Ermita de la Virgen de los Silos