Errichten ließ Schloss Kamieniec Ende des 18. Jh. Graf von Hartig. Im 19. Jh. ging es in den Besitz der Familie von Mutius und des Pfarrers Karl Eduard Grandke über, von dem es seine Frau, Constance Luisa von Mobius, erbte. Die Familie der Grafen von Ohlen und Adlerskron wurden dann die nächsten Besitzer.
Das Landgut in Kamieniec blühte unter der Familie von Seherr-Thoss auf, ein Verdienst von Arthur von Seherr-Thoss. Zwei Jahre nach dem Kauf des Schlosses ließ er es umbauen und das Herrenhaus modernisieren. In dieser Zeit wurde der Barockpalast um einen Nordflügel erweitert und der Eingang erhielt ein Sandsteinportal.
Die Nachkriegsjahre bedeuteten für Kamieniec eine Zeit erheblicher Zerstörung. Das Schloss und die Wirtschaftsgebäude wurden zu Wohnzwecken genutzt, die Gebäude jedoch nicht renoviert. Hier entstand ein Düngerdepot. Die letzten Bewohner verließen die Stadt im Jahr 2004. Das Schloss wurde verwüstet und geplündert.
Im Jahr 2009 ging Kamieniec in die Hände der heutigen Eigentümer über. Dem Beginn der Renovierungsarbeiten gingen spezialisierte Studien und Projekte voraus. Den Innenräumen wurde ihre frühere Pracht zurückgegeben, und es gelang, den historischen Garten, der später um den südlichen und nördlichen Teil des Gutshofs erweitert wurde, wieder zu beleben.
