Castel del Monte ligt in de omgeving van Andria, in Apulië. Op elk van de acht hoeken heeft het acht torens van dezelfde vorm in de muren van lokale kalksteen, gemarkeerd door een plintlijst, er openen zich acht eenvoudige ramen op de benedenverdieping, zeven dubbele en slechts één driedelig raam, gericht op Andria, op de bovenverdieping.
De binnenplaats van Castel del Monte, achthoekig van vorm, wordt gekenmerkt, net als het hele gebouw, door het kleurcontrast dat ontstaat door het gebruik van koraalbreuksteengesteente, kalksteen en marmer; vroeger waren er ook oude beeldhouwwerken aanwezig, waarvan alleen de plaat met de voorstelling van de Ruiterprocessie en een fragment van een antropomorfe figuur zijn overgebleven.
Op de bovenverdieping openen drie deur-ramen, waaronder enkele uitstekende elementen en gaten aanwezig zijn, mogelijk bestemd om een houten balkon te dragen dat nuttig was om de zalen onafhankelijk van elkaar te maken, alle met elkaar verbonden door een ringeroute, behalve de eerste en de achtste, gescheiden door een muur waarin zich bovenaan een groot oculus bevindt, waarschijnlijk gebruikt om te communiceren.
De zestien zalen, acht per verdieping, hebben een trapeziumvorm en zijn gedekt met een ingenieuze oplossing. De ruimte is namelijk verdeeld in een centrale vierkante ruimte gedekt met kruisribgewelven (met halfzuilen van koraalbreuksteen op de begane grond en trilobale marmeren zuilen op de bovenverdieping), terwijl de resterende driehoekige ruimtes worden gedekt door spitsboogtongewelven.
De sleutelstukken van de ribgewelven verschillen van elkaar, versierd met antropomorfe, zoomorfe en fytomorfe elementen.
De verbinding tussen de twee verdiepingen verloopt via drie wenteltrappen ingebouwd in evenveel torens.
Sommige van deze torens huisvesten reservoirs voor het opvangen van regenwater, deels ook geleid naar het reservoir uitgehouwen in de rots onder de centrale binnenplaats.

In andere torens zijn daarentegen de badkamers gelegen, uitgerust met een latrine en wasbak, en allemaal naast een kleine ruimte, waarschijnlijk gebruikt als kleedkamer of mogelijk bedoeld voor het plaatsen van badkuipen, aangezien lichaamsverzorging veel werd toegepast door Frederik II en zijn hof, volgens een typische gewoonte van die Arabische wereld die zo geliefd was bij de vorst.
Er is grote belangstelling voor het beeldhouwkundige ensemble dat, hoewel sterk gedegradeerd, een belangrijke getuigenis levert van de oorspronkelijke decoratieve uitrusting, ooit gekenmerkt door een breed kleurenpalet van gebruikte materialen:
mozaïektegels, geglazuurde tegels, glasachtige pasta’s en muurschilderingen, waarvan aan het einde van de 18e en het begin van de 19e eeuw enkele lokale schrijvers en historici sporen zagen en beschreven in hun werken.
Momenteel zijn nog aanwezig de twee antropomorfe consoles in de Valkeniers toren, de telamonen die het paraplugewelf van een van de wenteltraptorens ondersteunen en een fragment van de mozaïekvloer in de achtste zaal op de begane grond. In het Provinciaal Kunstmuseum van Bari zijn tijdelijk ondergebracht twee belangrijke beeldhouwwerken, een hoofd en een koploze buste, gevonden tijdens de lange restauraties die echter geen enkele aanwijzing opleverden over het achthoekige bassin in het midden van de binnenplaats, genoemd door enkele wetenschappers van de vorige eeuw.

