За пръв път е построен през 1337 година . Двореца на херцога на Колорно се предава на семейство Фарнезе през 1612. Ранучо II по молба на съпругата му Маргарита Виоланте Савойски започва ремонт на сградата, но настоящият външен вид се дължи на сина Франчес
