Tvrz byla postavena patrně poč. 15. stol., r. 1406 ji od markraběte Jošta koupil Jan Hovorka z Hartvíkovic. Tvrz držela řada majitelů, mj. i Pernštejnové. R. 1534 ji Smil Osovský z Doubravice renesančně přestavěl. Poté se majitelé často střídali, r. 1712 byla přestavěna do dnešní barokní podoby.
Tvrz ve Valči existovala již na počátku 15. století, neboť v r. 1406 ji markrabě Jošt osvobodil spolu se vsí z manství Janu Hovorkovi z Hartvíkovic. Pak se stala tvrz se vsi, dále Krahulov (v té době zvaný Kraluhov), Zárubice a Radonín vlastnictvím Mikuláše z Mochova. Jan z Mochova prodal v r. 1437 tvrz a ves Valeč s částí Zárubic bratrům Ješkovi, Mikuláši a Vaňkovi z Náramče. V r. 1480 získal tvrz a ves Valeč, Vilémovice a holoubecké zboží Jan z Kunštátu od Zikmunda a Václava Rájeckých z Mírova. V r. 1520 vlastnil tvrz Vilém z Pernštejna. Jan z Pernštejn ji však vyměnil v r. 1529 se Smilem Osovským z Doubravice, který ji přebudoval v r. 1534 na renesanční obdélníkový zámek s portálem (nese letopočet 1534), štíty a sgrafitovou výzdobou. V r. 1567 náležel zámek se vsí Bartoloměji Vaneckému z Jemničky, v 17. století byl zámek se statkem v majetku hrabat z Náchoda, avšak od 60. let 17. století až do r. 1945 se jeho majitelé rychle střídali. V r. 1712 získal zámek dnešní barokní podobu. Po desetiletích chátrání za totality získal zámek po roce 2000 soukromého majitele, který jej úspěšně zrekonstruoval. Dnes je v zámku luxusní hotel a restaurace
Hrady, zámky a tvrze v Čechách na Moravě a ve Slezsku - Jižní Morava (doplněno redakcí), 23.4. 2004