Le château est constitué dune enceinte carrée cantonnée de trois tours circulaires et dune tour carrée. Trois des quatre faces sont occupés par des bâtiments résidentiels.
Le bâtiment primitif est constitué par la tour carrée et le logis adjacent remontant probablement à la fondation de la seigneurie en 1261, les autres bâtiments datant du 15ème ou du 16ème siècle.
Pendant la guerre de Cent Ans, Esplas est assiégée par les anglais et, en 1376 les fortifications sont renforcées, la tour est isolée du logis pour mieux assurer sa défense. En dehors de son image symbolique, la Tour assure une fonction concrète, celle dun espace de sûreté et dun logis provisoire.
Avec le retour des temps de paix, le château devient une résidence de plaisance comme en témoigne les nombreuses fenêtres percées dans les murs et dans les tours.
La restauration commencée en 2000 touche à sa fin et priorité a été donnée à la conservation de lédifice et à la restitution des parties les plus anciennes.