Der Bau des ältesten Flügels geht auf die Normannen zurück, wahrscheinlich auf das Jahr 1042, und wurde zu Beginn des 14. Jahrhunderts beendet; dies wird durch ein Wappen des Feudalherrn Giovanni Pipino belegt, das sich am Eingang eines Turmes befindet, der zu den Räumen führt, in denen heute die Archäologieausstellung "Quando l’Ofanto era color dell’Ambra" (Als der Fluss Ofanto bernsteinfarben war) untergebracht ist.

Jahrhundertelang wurde das Schloss als Festung genutzt, wobei hier auf die Belagerungen und Schlachten von 1341 und 1350 zwischen der Familie von Pipino und der Familie Del Balzo zu verweisen ist, und erfuhr in der ersten Hälfte des 17. Jahrhunderts erhebliche Veränderungen durch die Fürsten Pignatelli, die Feudalherren von 1619 bis 1657, die es in einen luxuriösen Wohnsitz verwandelten. Sie fügten den gesamten vorderen Korpus sowie die Fassade hinzu, die durch einen großen Hof vom normannischen Teil getrennt ist.

Zu dieser Zeit wurde ein interner Gang gebaut, der das Schloss mit der Kirche des Hl. Franziskus verband, damit die Mitglieder der Adelsfamilie den Gottesdiensten innerhalb der geschützten Struktur beiwohnen konnten.

Einige Jahre lang diente das Schloss Cavalier Bayard, einem französischer Helden, der unter dem Namen Ritter ohne Furcht und Tadel bekannt ist, als Unterkunft; er war einer der Protagonisten des Kriegs zwischen Spaniern und Franzosen in den ersten Jahren des sechzehnten Jahrhunderts. Heute beherbergt das Schloss die Gemeindebüros.