
První zmínky o Valtinově se objevila v letech 1399-1404 v predikátu Hanuše Blekty z Valtinova. Jeho potomci drželi Valtinov až do počátku 17. století. Roku 1602 byl statek prodán věřitelům a poté jej koupil Kryštof purkrabí z Donína. Jeho synovi Konrádovi byl po Bílé Hoře Valtinov zkonfiskován a novým majitelem se stal Albrecht z Valdštejna. Po jeho zavraždění se několikrát vystřídali majitelé až jej roku 1667 koupili Pachtové z Rájova. Kteří zdejší sídlo barokně přestavěli. Roku 1718 byl doposud samostatný statek připojen k panství Jablonné, jehož osudy nadále sdílel. Ve druhé polovině 20. století byl utilitárně využíván jako výrobna sýrů, po požáru roku 1983 je zámek v havarijním stavu.
Roku 1729 nechal zámek do dnešní podoby přestavět Jan Jáchym Pachta z Rájova. Zámek je obdélná dvoupatrová budova s klenutým přízemím s malou věžičkou. Valbová střecha byla zničena požárek roku 1983.