XIV wieku Kazimierz Wielki zbudował nad urwiskiem opadającym do Raby gotycki zamek. Zamek był wzniesiony na planie nieregularnym. Stał się siedzibą starostów niegrodowych, tu także przebywał w XV wieku Jan Długosz. W XVI wieku rozbudowany, w następnym wieku podczas potopu szwedzkiego uszkodzony. W początkach XVIII wieku zniszczony podczas wojny północnej. Dziś mieści się w restaurowanych pomieszczeniach muzeum regionalne. Zachowały się ceglane mury przyziemia, wieży i kaplicy.