Дворец был построен в 1800 году в стиле берлинского классицизма. В 1880 году он был перестроен – модернизирован в соответствии с требованиями нового стиля. Были пристроены боковые поперечные корпуса, а в центральной части - ризалит с фронтоном в стиле неоренессанса. Владельцы поместья использовали самые передовые для своего времени технологии и в 1893 году провели телеграфную линию до города Салдус. В 1905 году дворец был сожжен, потом в 1926 году восстановлен, но в результате этого потерял эркеры главного фасада. Оригинальное оформление интерьеров дворца не сохранилось. Рядом с дворцом находился рельеф «Сфинкс», созданный в 1800 году. (К.Вейнберга, Ю.Звиедранс)
Поместье Ремтес в 1506 году в ленное право получил Людвиг Бутларс (Butlar), и замок принадлежал его роду 190 лет. Следующими владельцами поместья был род фон Брукенов (Brincken), но им не везло в хозяйстве, и в 1722 году собственность была выставлена на продажу. В 1723 году ее выкупил лейтенант Фридрих фон Брукен (Brucken). В 1767 году его дочь вышла замуж в третий раз, ее супругом стал Иоган Фридрих фон Медем, который после смерти жены, в 1780 году стал владельцем поместья, а в 1799 году получил и графский титул. В его собственности поместье оставалось до 1920 года, когда поместье было разделено на хозяйства, а во дворце устроили Ремтскую школу, которая и по сей день ведет хозяйство в замке Ремтес.
