Voluto dal notabile Giorgio Santacroce, che ne fece il fulcro di Oriolo Romano, borgo integralmente nato dal suo progetto di bonifica di un'area splendida ma insicura, l'attuale palazzo fu edificato negli anni 1578-1585. All'inizio del Seicento divenne proprietà degli Orsini e successivamente degli Altieri. Il giardino e il parco, recentemente divenuto di proprierà comunale, anch'essi realizzati dal Santacroce alla fine del XVI secolo, si sviluppano a ovest del palazzo. Da segnalare appena passato il ponte, un grande tasso (Taxus baccata) centenario, posto al centro del giardino all'italiana.

"Il giardino e il parco, di circa 8 ettari, recentemente passato dalla famiglia Petrucci alla proprietà comunale, furono fatti realizzare da Giorgio III Santacroce a partire dal 1582 e si sviluppano sul lato di ponente del palazzo, ad esso collegati tramite un ponticello. Subito passato il ponte, appena si scende una doppia scalinata, si trova un piccolo giardino all'italiana, con al centro un centenario esemplare di Taxus baccata, risalente ad un impianto databile tra il 1915 e il 1920, il cui impianto è ora parzialmente leggibile. Un unico lungo viale principale, fiancheggiato da alberi secolari, tra cui Abies alba, attraversa il parco fino a terminare di fronte a un casino, detto la "Prospettiva", che costituisce fondale prospettico, passando per un piccolo spiazzo con fontana circolare in peperino. Tra la fontana e la Prospettiva, sulla destra, sono piante di castagno e un notevole esemplare di ciliegio. Nello stesso tratto, come pure nel viale a destra della fontana sono due querce a candelabro di enormi dimensioni. Alcuni viali intersecano il viale principale, caratterizzati da "gallerie", realizzate soprattutto con lauroceraso, di antico impianto. Il vasto giardino venne attrezzato sin dall'origine in forma di "barco", destinato alla caccia, e a differenza dei giardini coevi rinascimentali, mantiene ancora oggi quegli aspetti naturalistici che anticipano i parchi inglesi. Al suo interno compaiono numerose specie arboree pregiate secolari, quali tassi, abeti bianchi, lecci, cerri."