První zpráva o Žamberku je z roku 1341, kdy náležel k podštejnskému panství Mikuláše z Potštejna. Při dělení panství r. 1568 mezi syny Zdeňka Žampacha z Potštejna získal polovinu Žamberka Karel Žampach. Zřejmě to byl on, kdo postavil na místě nynějšího zámku kamenný dů…historie - Hrady, zámky a tvrze v Čechách, na Moravě a ve Slezsku, Východní Čechy, Nakladatelství Svoboda 1984