Majątek Gaczany należy od początku XVIII wieku , do , wywodzącej się z zakonu Kawalerów Mieczowych , rodziny baronów Rosenów.

Rosenowie osiedlili się w krajach bałtyckich już w XIII w. Najstarsza siedziba rodu – to istniejący do dziś zamek Gross Roop w miejscowości Straupe na Łotwie (80km na północ od Rygi, przy drodze do Tartu). Gałąź kurlandzka rodziny zamieszkiwała tam od początku XIII w do 1939 roku, bez przerwy.

Dwór w Gaczanach wybudowano w 1858 roku w miejsce poprzedniego, który stał nieopodal. Ostatnim właścicielem Gaczan przed II Wojną Światową był Piotr Rosen. Urodził się właśnie tu w 1865 roku i zmarł w Wilnie w 1945r.

W okresie II Wojny Światowej przechodzący tędy front sprawił , iż Dwór zajmowali ,na zmianę, sowieci i hitlerowcy.

Po zakończeniu wojny, w czasach litewskiej republiki sowieckiej, Gaczany były kolejno : biurem kołchozu, domem kultury, miejscem zabaw tanecznych i w końcu domem mieszkalnym dla wielu rodzin.

Około roku 1999 obecny właściciel Gaczan, żyjący na emigracji we Francji, potomek rodu Piotr Rosen (wnuk Piotra, urodzony w Polsce w 1947 roku) odzyskał majątek i rozpoczął gruntowny remont Dworu oraz przywracanie do życia, otaczającego Dwór, parku. Remont trwał 7 lat. W roku 2006 Dwór odzyskał dawny blask. Został odbudowany z wielką pieczołowitością . Dokumentacją były głównie zdjęcia oraz relacje ostatnich mieszkańców. Wygląda tak jak go pozostawił w 1939 roku dziadek Piotr.

Dziś jego salony, jadalnia, fitness i siedem sypialni z łazienkami wypełnione są gwarem gości z wielu krajów, o komfort których dba ostatni potomek rodu baronów Rosenów, Piotr Rosen.

Aktualnie Dwór znajduje się na liście zabytków Litwy. Stosowna tablica ustawiona jest przed wjazdem.