Tvrz, pak renesanční a následně barokní přestavba. Takovým stavebním vývojem prošel zámek v Milešově. Jako majitel se na ní podílel i slavný vojevůdce, který zachránil v roce 1683 obléhanou Vídeň a celou habsburskou monarchii před hordami Turků - Zdeněk Kašpar hrabě Kaplíř, svobodný pán ze Sulevic.