
Vesce se poprvé připomínají v roce 1349. Někdy po roce 1541 je získali Bítovští z Lichtenburka. V letech 1549-1551 zde pravděpodobně Hynek Bítovský nechal vybudovat dvůr a renesanční tvrz, která je ale poprvé doložena až za Zdeňka Bítovského v roce 1558. Na tvrzi se pak střídala celá řada majitelů, mj. i Schaumburkové, majitelé moravskobudějovického panství, ke kterému Vesce přináležely. Ti v polovině 17. století tvrz barokně upravili, což dodnes připomínají vysoké barokní štíty. Po provedených úpravách se tvrz nazývala zámkem nebo panským domem a sloužila jednak jako obydlí správce dvora a jednak jako sýpka. Zámeček dnes stojí uprostřed návsi nad rybníkem a slouží jako obytný dům a částečně pořád jako sýpka. Je to obdélníková budova se sedlovou střechou opírající se o dva vysoké barokní štíty. Je opatřena podstřešní římsou a lizénami.