A műemlék jellegű, egykori barokk, majd az évszázadok során többször átépített és megtoldott kastély községünk büszkesége. Névadója Holitscher Károly, az épület utolsó tulajdonosa, egykori országgyűlési képviselő, bankelnök, nagybirtokos. Az épület építési idejét nem ismerjük, de 1747- 49. között már említik, mint Eszterházy Imre tulajdonát, rá utalnak az épületben talált C I E monogramos téglák. Ekkor már biztosan létezik a boltíves pince és az épületnek a pincével megegyező alapterületű része. A kastély felújítása során azonban találtak még Esterházy János gróf által -1692. előtt- vettetett téglákat is. A kastély természetesen ritkán szolgált állandó lakásául az általában Bécsben és Pozsonyban tartózkodó Eszterházy grófoknak. Alkalmanként szállhattak meg az épületben, nyaralónak, vadászháznak használva azt. Az oszlopi kastély megépülte után, az 1780-as évek végén már valószínű, hogy egy rövidebb ideig nem is lakták. Ekkorra oly mértékben leromlott az épület, hogy az akkor házasodó Eszterházy Mihály 1817. táján 60.000 ezüst forintból tudta csak helyreállítani az egykori barokk kúriát. A korabeli leírások alapján így nézhetett ki az akkori épület. Feltehetően 1852-60. között került sor a másik nagy átépítésre, tulajdonosa ekkor ifj. Zitterbarth Mátyás, a kor egyik legnevesebb klasszicista építésze. Az ezt követő 30 év alatt toldotta meg a földszintes részt egy víztoronnyal valamelyik tulajdonos, az 1890 körüli alaprajz az akkor a kastélyban szolgálók visszaemlékezései alapján készült.
Egykoron a kastélyhoz tartozott az úgynevezett kiskastély is, mely a mai emeletes szárny helye előtti részen volt, és 1890. előtt elsősorban vendégszobák voltak benne. A nyitott verandás kiskastélyt fedett átjáró kötötte össze a toronnyal. 1892-ből maradt ránk az első fénykép az épületről. Zitterbarth Mátyás 1862-es halála és a millennium között több tulajdonosa volt az épületnek: báró Bornemissza Gábor, a Sclézinger-család, a bécsi Boschán-család, majd végül a kastélyt emeletes szárnnyal megtoldó Holitscher Lipót és leszármazottai. A két világháború közötti felvételek: utcai homlokzat: 1. kép, 2. kép, park felőli homlokzat: 1. kép, 2. kép, belső tér. Az épület utolsó tulajdonosától Holitscher Károlytól az államosítás során vették el az épületet és a hozzá tartozó nagybirtokot. A második világháború után az épületet államosították és a helyi tanács, majd önkormányzat tulajdonába került, itt volt a tanácsház, a posta és egyéb közintézmények. A felújítás előtti romos épület. A kastély földszintes részét 1993-94-ben az önkormányzat támogatásával közművelődési célokra újíttatta fel a Holitscher Kastély Felújító Társaság Alapítvány. Az emeletes szárny felújítási munkái 2000-ben kezdődtek, és még napjainkban is tartanak. A felújítások utáni jelenlegi állapot és egy légi felvétel az épületről. A kastély körül található, több mint 16 hold területű, angol mintára telepített park történetéről, életkoráról nem sokat tudunk. A park elődje talán a kastély körül meghagyott ősi erdő lehetett, melynek még létező legidősebb fái 25o-3oo évesek, első említése 1846-ból való. Jelenlegi állapota inkább gondozott parkerdő jelleget mutat, mint a két világháború közötti egykor egzotikus növényekkel telepített arborétumot.
http://www.cseteny.hu/helytortenet/holitscherkastely.html