Baroni Lanthieriji so verjetno že sredi 17. stoletja pričeli graditi blizu Baumkircherjevega turna sredi Vipave novo rezidenco, danes znano kot Lanthierijev dvorec. Prvotno skromno poslopje, so v začetku 18. stoletja razširili, nato pa ga leta 1762 temeljito prenovili, in takrat je dobil sedanjo podobo Od konca prve svetovne vojne do oktobra 1992 so v grajskih sobanah bivali vojaki, v njem je bila vojašnica italijanske vojske, po drugi svetovni vojni pa so bili v njem prostori doma JLA.