
Obec Kovarce sa nachádza vedľa známejšej obce Oponice v okrese Topoľčany. Obec zaujímavá na pamiatky dokonca sa tu nachádza expozícia v krypte predka Audrey Hepburn - Antona Welsa. Kaštieľ sa nachádza približne v strede obce vedľa kostola sv. Mikuláša. V obci sa nachádza ešte jeden kaštieľ na okraji obce pri rieke Nitra, historické údaje o tomto kaštieli sú však ťažko dohladateľné. Je v súkromnom vlastníctve a obývaný.
Kaštieľ v tomto období dostáva nové podlažie a západné krídlo, ktoré slúžilo ako sýpka. V roku 1906 kaštieľ do prenájmu od šľachtičnej rodiny Appony z neďalekých Oponíc dostáva Mary Cardeza. Mary bola vydatá za amerického milionára Thomasa Cardezu. Mary sa iniciovala v prestavbe kaštieľa do podoby v ktorej je zachovaný dodnes. Okolo kaštieľa nechala vybudovať záhradu ktorá mala skleníky vykurované ústredným kúrením a chovali sa v ňom medvede, pávy, vlky, srnky a šimpanz. O celý park sa staral Jozef Mašinda, absolvent kráľovskej záhradníckej akadémie vo Viedni. Chodby kaštieľa zdobilo niekoľko tisíc poľovníckych trofejí. Mary sa venovala dobročinným aktivitám, často rozdávala oblečenie a potraviny a podporovala finančne rodiny v núdzi. V roku 1912 počas jednej z mnohých ciest sa Thomas ocitol na palube Titanicu avšak potopenie prežil so svojou matkou Charlotte a komorníkom. Thomas po potopení Titanicu zostal silne veriaci a v kaštieli nechal vybudovať repliku kajuty z Titanicu. Počas 1. svetovej vojny boli v kaštieli umiestnení vojnový invalidi. Funkcia kaštieľa ako šľachtického sídla sa po vojne začala strácať. Thomas a Mary odišli z kaštieľa v roku 1920 a vrátili sa do USA. Vojaci zostali v kaštieli aj po ich odchode a po odkúpení kaštieľa v roku 1926 štátom od Apponyovcov bolo rozhodnuté, že v kaštieli bude Ústav vojnových invalidov. Po 2. svetovej vojne bol ústav zmenený na Ústav pre duševne chorých. Dnes je tu Zariadenie sociálnych služieb Clementia..