W 1582 marszałek wielki litewski Mikołaj Krzysztof Radziwiłł (Sierotka) na ruinach dawnych fortyfikacji rozpoczął budowę monumentalnego renesansowo-barokowego zamku na planie kwadratu, projektu Jana Marii Bernardoniego. Budowla została ukończona w 1604, z wyjątkiem galerii, które dobudowano pół wieku później. Na jej 4 narożnikach zbudowano ośmiokątne wieże. Zespół pałacowy był przebudowywany i odbudowywany wiele razy na przestrzeni wieków - w stylu baroku, klasycyzmu, neogotyku.
Garnizon:
XVIII Kompania Piechoty Niemieckiej
XIX Kompania Piechoty Niemieckiej
XX Kompania Piechoty Niemieckiej
XII Bateria Artylerii Lekkiej
VII Bateria Artylerii Średniej