
Kaštieľ sa nachádza v severnej časti Látkoviec. Samotné Látkovce ležia v kotline za Ostrým vrchom približne 5 kilometrov od obce Uhrovec.
Novodobá prístavba je v tvare obdĺžnika a spolu s kaštieľom vytvára tvar písmena L..
Predpokladá sa však, že jednými z majiteľov kaštieľa mohla byť rodina Latkóczy, ktorá práve v Látkovciach žila. Pavol Latkóczy bol v 15. storočí veliteľom hradu Uhrovec. Ďalšími majiteľmi boli veľkostatkár Náchlinger s manželkou Máriou Sedničkovou. Kaštieľ prešiel prestavbou v roku 1918, kedy sa z jednoposchodového kaštieľa stal dvojposchodový kaštieľ. Okolo kaštieľa sa v minulosti nachádzali bohaté sady. Kaštieľ cez vojnu utrpel škody a po vojne v ňom bol zriadený pioniersky tábor. Z obdobia tábora sa datuje aj novodobá prístavba kaštieľa, ktorá znehodnotila časť kaštieľa. Pioniersky tábor v Látkovciach bol najväčší na Slovensku, v kaštieli sa v tom čase nachádzala kuchyňa a boli v ňom ubytované choré deti z tábora. Po ukončení tábora kaštieľ dlhé roky chátral. Kaštieľ je dnes v súkromnom vlastníctve a postupne sa opravuje. Majitelia v kaštieli usporadúvajú oslavy a vzniklo v ňom menšie retro múzeum. V minulosti kaštieľ navštevovali aj známe osobnosti ako Ľudovít Štúr a Alexander Dubček, ktorý sa obaja narodili v rovnakom dome v neďalekom Uhrovci..