Pierwotnie istniał tu renesansowy zamek obronny zbudowany w 1603 roku. Zbudowany był na planie prostokąta z narożnymi czterema bastejami. Podczas gruntownej przebudowy w 1833 roku został przekształcony w pałac. Na parterze zachował się pierwotny układ wnętrz.
Według przewodników i niepotwierdzonych informacji, w Bobrowie około 1450 roku miał istnieć zamek – strażnica „Boberstein”. Miał on strzec przeprawy przez Bóbr. Inne źródła podają, że został spalony przez husytów około 1428 roku.
