Brezovica bola založená podľa valašského práva valachov patriacich k oravskému panstvu. Zakladaciu listinu vydal v roku 1580 Stanislav Thurzo (1576-1625) šoltýsovi Alexandrovi Walasekovi ako náhradu za klčovanie a obrábanie pozemkov pre poľnohospodárstvo. Obec bola v roku 1683 vypálená a v roku 1690 úplne zruinovaná litovskými vojskami. V roku 1695 bola zahájená rekatolizácia obce. Do doby Márie Terézie obec spravovali dediční šoltýsi. Neskôr volení richtári. Konečné pomery medzi starousadlíkmi a oravským panstvom boli upravené urbárskou dohodou z roku 1870. Názov obce je odvodený od brezy.

Zdroj: webstránka obce