
Ves Kaštice se v písemných památkách prvně objevuje v roce 1348. V 15. stol. zde stála tvrz. Tvrz spolu s dvorem v průběhu staletí často měnil majitele, až v roce 1807 se majitelem stal Vít Zeiner. Ten dal roku 1833 zbourat starou zchátralou tvrz a na jejím místě postavit r. 1837 prostý klasicistní zámek. V roce 1945 přešel zámek spolu s dvorem do vlastnictví československého státu a byla v něm zřízena šlechtitelská stanice. Potřebám zemědělského podniku slouží dodnes.
Bílá paní Judita O půlnoci prochází zámeckou zahradou a kolem zámku tajemná bílá postava - Bílá paní, bývalá majitelka tvrze. U pasu má velký svazek klíčů. Volá prý sama sebe vlastním jménem „Judito!“ Je to přízrak Judity Geidlerové z Wolfsfeldu, bývalé paní na kaštické tvrzi, která zde hospodařila v letech 1740-1780 a měla pověst velké ukrutnice. Pro nesmiřitelnou vinu nenalézá v hrobě klidu.