En el castillo encontramos tres espacios: el patio de armas, el conocido como castillo viejo y el conocido como palacio nuevo. El castillo adopta planta irregular, construido en mampostería y sillería. Ocupa una superficie de 8.000 m2 y dispone de cinco torres principales en los frentes menos protegidos, la parte occidental protegida por el desnivel que lleva al río Sil no dispone de torres. Un lienzo de muralla conocida como ronda del Sil protege el castillo por ese frente, el desnivel del terreno hace el resto.

Como hemos indicado las defensas del castillo que miran al río Sil son de menor entidad ya que se aprovecha el desnivel del terreno y el escarpe o talud sobre el Sil. Sin embargo en las fachadas que miran a la población y donde se encuentra la puerta de acceso se encontraba protegida por un foso, hoy en la practica desaparecido. Es además en estas fachadas donde encontramos mayor número de torres defensivas y donde los muros son mas altos e incluso dobles, son las conocidas como ronda alta y ronda baja. En estas fachadas encontramos la torre de Moclín, la torre de los Caracoles, la torre de Cabrera, la torre de Malvecino y la torre de Malpica. Desde el muro de la fachada al Sil, salía en dirección al río un lienzo murado en forma de coracha o mina que servía de protección para la recogida de agua, coracha de la que solo quedan ruinas. En el extremo de la coracha ya junto al río Sil, se levantaba una torre albarrana conocida como "cueva de la mora".

Puerta de acceso conocida como puerta del puente levadizo. Es el icono representativo del castillo de Ponferrada. La puerta principal está formada por dos torreones circulares unidos por un lienzo donde se abre un doble arco de medio punto por donde corría un rastrillo. A sus pies un puente en piedra salva el foso, en su día este puente era levadizo, de donde toma el nombre la puerta. Las torres de esta portada son cúbicas y almenadas, los merlones disponen de albardillas con adornos de bolas. En el dintel de la puerta podemos ver cincelada la tau representativa de la familia Osorio. Por encima de la puerta un matacán volado apoyado en ménsulas de modillones. En la base del matacán unas aberturas permitían echar toda clase de objetos (piedras, fuego, aceite hirviendo etc. sobre un enemigo que quisiera tomar la entrada).

Traspasada la puerta entramos en un espacio descubierto que a su vez podía estaba batida por las dos torres mas cercanas: la torre de los Caracoles y la torre de Cabrera. Las torres cilíndricas que protegen la puerta de acceso son de las conocidas como de gola abierta, es decir que por el interior que miran al castillo no están protegidas ni reforzadas por lo que difícilmente un enemigo podrían hacerse fuertes en ellas, en caso de ser tomadas.

Después de esta primera puerta había que pasar por la torre de los Caracoles donde se encontraba una segunda puerta con rastrillo en recodo con la primera, lo que hacía muy difícil maniobrar a los atacantes al tiempo que se hostigaba a estos desde las alturas.

Patio de armas La superficie que ocupa el patio de armas ha permanecido inalterado con el trascurrir de los siglos, lo mas destacable de este espacio es que en el mismo se han encontrado restos de antiguas pallozas, cabañas circulares con base de piedra y cubierta de paja o arbustos que serviría de viviendas para los servidores del castillo o para los primeros habitantes de Ponferrada. Este espacio es ideal para hacer recreaciones teatrales sobre el mundo templario y sus caballeros.

Castillo viejo Situado en uno de los extremos del patio de armas, fue mandado construir por Pedro Fernández de Castro a mediados del siglo XIV. En el castillo viejo encontramos cuatro torres conocidas como: torre del homenaje nueva o cubo nuevo, torre del duque de Arjona, torre del homenaje vieja y torre de los Reyes Católicos. Es la construcción mas antigua de las que podemos ver en la actualidad.

La torre del homenaje vieja es la mas antigua de las cuatro, de 1340, se alza con dos pisos en su interior y es de planta cuadrangular. En ella se puede ver el escudo de la familia de los Castro que ordenaron levantar el castillo viejo (seis roeles o círculos).

La segunda torre en antigüedad es la torre del duque de Arjona o cubo viejo, tiene planta semicircular y tres pisos en su interior, está fechada en la segunda mitad del siglo XIV.

La torre del homenaje nueva o cubo nuevo es de planta semicircular, construida en el siglo XV. Es visible en su interior una gran chimenea y por una torrecilla adosada a la misma se sube hasta la parte superior por una escalera de caracol. Fue mandada levantar por Pedro Álvarez de Osorio. En ella encontramos los escudos de la familia Osorio y de su esposa Beatriz de Castro en el interior de un mismo cartucho. La torre levanta 24 metros de altura.

La torre de los Reyes Católicos se levantó en el siglo XVI y está adosada a la de homenaje vieja, tiene los escudos de Juan de Torres y la heráldica de los reyes. Fue mandada levantar por Juan de Torres primer corregidor del castillo en 1487 en nombre de los Reyes Católicos. El escudo de los Reyes Católicos se identifican por el yugo y las flechas mientras que el escudo de Juan de Torres se encuentra en un nivel inferior, formado por cinco torres en aspa bajo la rueda de santa Catalina.

En el patio de este castillo viejo junto a uno de los muros encontramos en el suelo, la boca de un pozo que servía como es de suponer para el suministro de agua, ya que la coracha o mina que servía de protección para la recogida de agua del Sil todavía no se había construido.

Palacio Nuevo Levantado sobre ruinas de la anterior fortificación del siglo XII, fue levantada por Pedro Álvarez Osorio, I conde de Lemos en el siglo XV. En su parte central encontramos un patio descubierto al que se abren las distintas dependencias. Entre las dependencias que podemos encontrar tenemos la bodega (antigua capilla templaria), sala de armas, sala de hombres buenos o sala de la chimenea, sala rica etc. En la actualidad todas estas salas están dedicadas a diversos usos turísticos o expositivos.

Torre de Moclín La torre se levanta sobre estructuras de cimentación templaria del siglo XII. La actual torre es del siglo XV, mandada construir por Pedro Álvarez Osorio. Su interior se divide en tres plantas y en la actualidad alberga salas dedicadas al mundo de los templarios. En la última restauración se ha recuperado la antigua cubierta a cuatro aguas, hoy de pizarra. Es una potente torre situada en la esquina suroeste y que permite una total visión de dos lienzos de muralla.

Torre de los Caracoles o del Rastrillo Construida entre 1440 y 1463 (siglo XV), mandada levantar por Pedro Álvarez Osorio (* 1457 † 1483), conde de Lemos. Situada por detrás mismo de la puerta de entrada complementa la defensa de la misma. De planta cuadrangular y almenada dispone de dos pequeñas torrecillas circulares en las dos esquinas que miran a la puerta de entrada. Sobre el arco de la puerta podemos ver una inscripción que dice: Nisi dominus custodierit civitatem frustra vigilat qui custodit eam “Si el Señor no protege la ciudad, en vano vigila quien la guarda”.

La puerta de entrada daba a un pequeño espacio que podía ser batido por la torre de los Caracoles o por la torre de Cabrera. Nada mas traspasar la puerta de la torre de los Caracoles encontramos en nuestro frente sobre una segunda puerta, el escudo de don Fadrique Enríquez de Castilla (* 1388 † 1430), I duque de Arjona y una inscripción con el texto: "De Arjona conde de Trastámara". Este escudo y su leyenda fue colocado por Pedro Álvarez Osorio con el objeto de aumentar su legitimidad sobre el castillo, al objeto hacer creer a los hijos tenidos con su segunda esposa (María de Bazán), que el dinero invertido en la construcción de la torre no había salido del patrimonio familiar, sino de su cuñado Fadrique Enríquez, cosa que finalmente no consiguió.

Torre de Cabrera De planta cuadrangular con cinco pisos en su interior, es una de las torres mas grandes y de mayor envergadura de todo el perímetro del castillo. Su nombre lo toma de la vecina comarca de La Cabrera, ya que la misma está orientada hacia ella. En ocasiones ha sido llamada como torre de la Velada (en menor medida).

Fue construida hacia 1440 por Pedro Álvarez Osorio. La torre se cubre exteriormente con una cubierta a cuatro aguas, de pizarra de reciente restauración. La torre es de gola abierta es decir no tiene muro de defensa mirando al interior del castillo, para evitar hacerse fuertes en ella, si la misma fuera tomada por el enemigo.

Torre de Malvecino Construida por Pedro Álvarez de Osorio en el último tercio del siglo XV. Torre de planta semicircular adelantada sobre la muralla. Su interior se alza con tres pisos. En sus muros se abren saeteras y troneras para la artillería de la época. Dispone de un aparatoso talud de refuerzo en la planta baja de la torre que fue realizado en tiempos de los Reyes Católicos.

Torre de Malpica Torre adelantada sobre la muralla de planta cuadrangular. Dispone de una pasarela de madera en la parte superior que comunica la torre con la muralla interior o ronda alta. Su interior se conforma en tres pisos o alturas y dispone de saeteras defensivas. Fue mandada levantar por Pedro Álvarez Osorio, I conde de Lemos en el siglo XV.

La Coracha se mantiene parcialmente en pie y solo quedan ruinas de lo que fue la antigua coracha. Una coracha es un muro de protección con un paso de ronda que bajaba desde la ronda del Sil hasta el río y que servía de protección a los encargados del abastecimiento de agua en caso de asedio. Finalizaba en una torre albarrana que además de torre defensiva permitía el acarreo del agua. Esta torre era conocida como la torre de la Mora.