
Na zříceninu hrádku Pustý Zámek se dostanete kamenitou strmou cestou asi 800m od hradu Kašperk. Cesta je značená a pod Pustým Zámkem je informační tabule. Je odtamtud úchvatný pohled do okolí. Dnes ze naleznete jen zbytky předsunutého opevnění hradu Kašperk.
Vznikl pravděpodobně až za Švamberků v 1. polovině 15. století jako zajištění vyvýšeniny před hradem. Pozor na poněkud zavádějící informace na informační tabuli, kde se nadhazuje možnost, že Pustý Zámek je předchůdce Kašperka. Hrádek sloužil jako strategické zajištění vyvýšeniny před hradem. Původně se jednalo o dvoupodlažní stavbu s pětibokou věží.
Hlavním strategickým účelem stavby bylo obsadit vyvýšený skalnatý hřeben, který převyšuje samotný Kašperk. V době rozmachu dělostřelectva by totiž nepřítel mohl z tohoto místa hrad snadno ostřelovat. Dominantou pevnůstky byla mohutná pětiboká věž, jejíž ostrý břit směřoval k východu, aby odrážel případné dělové koule. Tato věž byla pravděpodobně dvoupatrová a doplňoval ji ochoz pro střelce, čímž bašta zajišťovala kontrolu nad přístupovou cestou i celým okolím. Osud Pustého hrádku byl zpečetěn v 17. století. Již v roce 1616 je uváděn jako opuštěný a po roce 1655 byl na příkaz císaře Ferdinanda III. částečně pobořen, aby v pohnutých dobách po třicetileté válce nemohl sloužit jako úkryt pro nepřátelské oddíly nebo loupeživé bandy. Kromě vojenské historie je místo opředeno také tajemnými pověstmi. Vypráví se například o truhle s pokladem, kterou na hrádku hlídá obrovský černý pes, nebo o zjeveních, která mají odrazovat hříšníky od vstupu do těchto ruin za bezměsíčných nocí. Dnes je zřícenina volně přístupná a díky dřevěné vyhlídkové plošině nabízí jeden z nejikoničtějších pohledů na hrad Kašperk a šumavské panorama..