Przed I wojną światową część pomieszczeń zamku przeznaczono na mieszkania oraz biuro niemieckiej 3 Brygady Piechoty. Na początku lat 40. w jego piwnicach zorganizowano schron przeciwlotniczy. W czasie II wojny najwięcej zniszczeń zamku dokonała Armia Czerwona, paląc jego większą część. Odbudowa w latach 1964-1966 przywróciła mu jego gotycki charakter. Podwyższono dachy, w skrzydle północnym dodano jedno piętro z gotyckimi szczytami i spadzistym dachem. Obecnie wewnątrz zamku mieści się Biblioteka Miejska, Muzeum Regionalne im. Wojciecha Kętrzyńskiego oraz siedziba bractwa rycerskiego. W zbiorach muzeum obejrzeć można m.in. kolekcję obrazów, rzeźb i zabytkowych mebli z okresu od XV do XIX wieku.