Zamek murowany wzniesiony tu został prawdopodobnie za Kazimierza Wielkiego. Wcześniej był tu prawdopodobnie gród, o którym wzmianki znajdujemy już w 1108 roku. W 1 połowie XVII wieku po zniszczeniach odbudowany i otoczony fortyfikacjami ziemnymi staraniem Zofii z Herbutów. Od 1654 roku w ruinie. W latach 1515-1592 własność Górków, potem do 1631 roku - Czarnkowskich, następne 20 lat - Kostków, 1651-1687 - Grudzińskich, 1687-1700 - Opalińskich, do 1789 Sapiehów, 1789-1855 - von Blankensee, i do 1945 roku - Schulenbergów. W 1749-1750 roku ruinę odbudowano do postaci obecnego pałacu. Podjął się tego Piotr Sapieha, wojewoda smoleński według projektu Ignacego Marcina Frantza. Z projektu zrealizowano jednak tylko skrzydło południowe i zachodnie, a częściowo wzniesione skrzydło północne i wschodnie jeszcze w końcu XVIII wieku rozebrano. Wschodnia elewacja skrzydła zachodniego stanowiła od tej pory front pałacu.
W końcu drugiej wojny światowej pałac spalono i popadł w ruinę. Obecnie w trakcie odrestaurowywania. Znajduje się na niewielkim sztucznym wzniesieniu w obszernym parku.