Prvotno je stala skromna graščina Brezovica (Pirkenthal), naslednica fevdalne utrdbe Bresouitia, ki so jo leta 1509 zavzeli in požgali Benečani. Prvi lastniki utrdbe in graščine so bili pl. Raabi, nato pa sredi 17. stoletja grofje Petazziji, do leta 1777 pl. Kupferscheini, Franc Lazarič in od leta 1803 baron Antonio Marenzi. Konec 19. stoletja je Brezovica prešla v roke rodbine Stančič, zdaj pa na njenem mestu stoji nova hiša.