
Jednokřídlý dvoupatrový dům s dominantním prvkem původně románské obranné věže, s renesančními fasádami a štíty. V interiéru se dochoval renesanční sál s malovaným trámovým záklopovým stropem s námětem alegorií a Šalamounova soudu. Nad barokním vstupním portálem do dvora purkrabství jsou umístěny znaky purkrabí ze 17. a 18. století – Adama z Valdštejna, Jaroslava Bořity z Martinic, Jana Josefa z Vrtby, Karla Egona z Fürstenberka. Z nádvoří je dobře vidět románská Černá věž.
Od roku 1334 zde několik let žil moravský markrabě Karel, pozdější císař Karel IV., než se přestěhoval do opraveného královského paláce. Pro potřeby úřadu Nejvyššího purkrabího nechal dům po požáru v roce 1541 upravit Jan z Lobkovic. Přestavba probíhala v letech 1555–1561 a provedl ji vlašský stavitel Giovanni Ventura; za něj vznikla sgrafitová výzdoba fasád. Další renesanční úpravy, které areálu daly dnešní tvář, provedl v 90. letech 16. století Ulrico (či Oldřich) Aostalis de Salla. Jeho dílem je krásný renesanční štít. V 60. letech 20. století zde byl Dům československých dětí. V současnosti je zde Muzeum hraček a galerie. Od roku 1994 se na nádvoří konají Letní shakespearovské slavnosti..