En el interior se observan tipos diferentes de materiales de construcción que hacen pensar en reparaciones y obras de mantenimiento, más que en reformas de envergadura. Su planta es similar a la del exterior, con el refuerzo de dos torres en el muro S, obra de sillarejo, mas cuidada que los muros restantes. El interior del recinto se halla totalmente arruinado, pudiendo observarse los mechinales de los diferentes pisos en que se hallaba dividido. Su historia es la de una villa que si bien tuvo la importancia de otras de la provincia decaerá hasta convertirse en un despoblado. Alfonso VII en 1129 concede el fuero de Zamora y señala términos al lugar de Castrotorafe. A principios del siglo XIII su puente tendría gran importancia pues Doña Urraca, viuda de Fernando II, quien se la había dado en arras, junto con su hijo Alfonso IX conceden la mitad del portazgo, en 1206, a la Catedral de Zamora para las obras de su claustro. Mas tarde aparece en manos de la Orden de Santiago, a la que, en 1351, el rey Don Pedro el Cruel se dirige solicitando sea entregado a Don Juan de Alburquerque, el cual, al perder la privanza del rey se refugiará en la villa, para después pasar a Portugal. Don Pedro cede su posesión a Men Rodríguez de Sanaría. Enrique III hará arrasar el castillo como represalia al apoyo que aquél había prestado a su hermano. Durante la guerra contra Portugal por la causa de Isabel I y la Beltraneja el ejército portugués llegara a apoderarse de la villa pero no del Castillo, cuyo cerco han de levantar ante la presencia en Zamora de Fernando el Católico. De nuevo pasó a pertenecer a la Orden de Santiago, a cuyo comendador Alfonso de Palencia se deben las ultimas obras de reparación. A partir de este momento entra en un capítulo de silencio, hasta el siglo XVIII, en el que comienza el proceso de despoblamiento de la villa llegando al estado de ruina y abandono en que se halla actualmente.