Pěkná goticko-renesanční tvrz zvaná Šarovcova stojí uprostřed města. Tvrz je patrová trojkřídlá stavba kolem arkádového nádvoří se čtyřpatrovou hranolovou věží a vodním příkopem. Na vnější straně objektu i v jeho interiéru se dochovaly pozdně gotické a renesanční portály. Tvrz byla vybudována ve 14. století. V polovině 16. století za pánů z Kunovic byla renesančně přestavěna. Po bitvě na Bílé hoře byla tvrz zkonfiskována a v roce 1625 ji získali Lichtenštejnové, kteří dali tvrz upravit na sýpku. V roce 1943 ji koupila obec Hluk. V letech 1959 - 1965 byla rekonstruována pro kulturní a společenské potřeby obce.