końcu XV wieku istniał
w Celejowie folwark Jakuba i Pawła
z Chotczy herbu Nabram. Po połowie XVI wieku ród ten wybrał Celejów na swoją główną siedzibę,
w związku
z czym rodzina Choteckich wzniosła tu
z ciosów kamiennych dwukondygnacjowy dwór-zamek. Przed 1570 rokiem zamek przeszedł jako wiano Emarcjanny
z Choteckich na własność Andrzeja Dunin-Borkowskiego.
W 1740 roku kolejni właściciele Tarłowie przebudowali dwór według projektu architekta Franciszka Mayera, a
w 1800 roku ponownej rozbudowy
podjęli się Lubomirscy.