
Obec Žitenice leží na upatí Křížové hory (584 m), při silnici z Litoměřic do Ploskovic, pojedete-li po vedlejších cestách. V obci je již v 15. století vzpomínána tvrz. Vlastní zámek stojí v těsné blízkosti kostela. Je to dvoukřídlá, dvoupatrová budova s křídly uzavírajícími pravý úhel. Dvůr je uzavřen hradbou s kamennou branou se štítem. Jedná se o znak vyšehradské kapituly a probošta snad Huga z Königsecku (Koenigsegga).
Kolem roku 1436 získal tvrz do zástavy Jakoubek z Vřesovic, později ji držel Prokop z Rabštejna a jako věno Prokopovy dcery Ludmily Žitenice přešly stále jako zástava do držení Roupovských z Roupova. Snad až Za Roupovských ve 2. polovině 15. století byla tvrz rozšířena směrem k východu a nabyla podoby obdélné (cca 33x14 m) jednopatrové budovy. Roku 1611 se podařilo Václavu Vilémovi z Roupova dosáhnout přeměny zástavního držení na zpupné vlastnictví. Snad právě to bylo impulsem pro pozdně renesanční přestavbu tvrze. Stávající stavba byla zvýšena o druhé patro, severozápadnímu nároží bylo kolmo přiloženo nové dvoupatrové obdélné křídlo. V pobělohorských konfiskacích Václav Vilém z Roupova o Žitenice přišel a staronovým majitelem se stala vyšehradská kapitula. Nevýrazné stavební úpravy byly provedeny na přelomu 17. a 18. století a po požáru r. 1806, na vnější podobě stavby se však příliš neprojevily. Zámek byl po roce 1948 znárodněn, nejprve byl využíván státním statkem a od roku 1962 zde sídlila pobočka oblastního archivu v Litoměřicích. Do roku 2010 sloužil zámek jako archiv - oddělení šlechtických archivů a zemědělského hospodářství. Po roce 1989 zámek v několika etapách do r. 2015 restituovala vyšehradská kapitula, pro areál však neměla využití, a proto jej nabídla k prodeji. Z iniciativy židenických občanů se po dlouhých sporech v září 2024 konalo místní referendum, v němž se 68,49% hlasujících vyjádřilo pro odkoupení zámku obcí. Zastupitelstvo obce v souladu s výsledky referenda podepsalo s kapitulou kupní smlouvu. Po nezbytné, a nikoliv levné rekonstrukci (odhadované náklady jsou 100-250 milionů Kč) by mohl zámek sloužit jako obecní úřad, knihovna, obřadní síň prostor pro dětské skupiny a další obecně prospěšné aktivity..