W XIX w. obiekt przeszedł we władanie rodziny von Brauchitsch, która rozbudowała budynek jednak już w stylu neogotyckim, a także powiększyła otoczenie i zmieniła układ parku. Na szczególną uwagę zasługuje Ptaszarnia, czyli ośmioboczny budynek, który powstał pośrodku dziedzińca w 1925 r. Niestety los posiadłości był tragiczny.

Część parku w XX w. została podzielona na działki i zabudowana domami jednorodzinnymi, a pałac jeszcze przed II wojną światową należał do Towarzystwa Nauczycieli Szkół Średnich i Wyższych w Warszawie. Po wojnie obiekt przejęła Centralna Rada Związków Zawodowych, aby w latach 80. oddać go Związkowi Nauczycielstwa Polskiego.

Do 2007 r. w pałacu mieściło się I Akademickie Liceum Ogólnokształcące i choć uczniowie narzekali na ciężkie warunki to cenili sobie spokój, odosobnienie oraz wyjątkową atmosferę panująca w zabytkowych wnętrzach.

Przez wiele lat obiekt nie był remontowany, aż w końcu został sprzedany prywatnej firmie – Przedsiębiorstwo Budowlane Górski. Do niedawna w pałacyku miała swoją siedzibę Gdyńska Szkoła Filmowa, jednak zapadła decyzja, że zespół pałacowo – parkowy ma odzyskać dawny blask i stać się jednym w najbardziej urokliwych miejsce w Gdyni.

Obecnie po remoncie, jest to obiekt noclegowy Hotel Quadrille Relais & Châteaux*****, park udostępniony jest dla mieszkańców, którzy w pełni mogą korzystać z jego walorów.