
Dům stojí v Zámecké ulici mezi Horním zámkem a farním kostelem. Přímo kolem něj vede žlutá turistická značka.
Fasády průčelí jsou jinak jednoduché, členěné jen okny s kamenným ostěním a bosáží v rozích. Hlavní portál s polokruhovým záklenkem je v ose jižního průčelí. Vstupní síň se šnekovitým schodištěm sklenuta síťovou žebrovou klenbou, sousední místnost valenou klenbou s lunetami. K západnímu průčelí je přistavěna zřejmě barokní kolna, používaná dnes jako garáž. Celý objekt kryje obnovená šindelová střecha. Severní okraj nepřístupného a zarostlého dvora tvoří bývalá městská hradba s baštou. V dvoře stál pilíř někdejšího napojení na dřevěnou krytou pavlač, která po hradbě vedla od Dolního přes Horní zámek do farního kostela (s letopočtem 1552, dnes v porostu dvora nerozeznatelný, nejspíše zaniklý)..
Později se objekt dostal do majetku některého z vlastníků panství Konojedy, odkud získal své jméno. Od roku 1705 sloužil jako panský špitál. Po roce 1945 opuštěn, v 70. letech 20. století opraven plášť budovy, v současné době prázdný, využívá se pouze západní přístavba jako garáž..