Matsalu oli keskajal Saare-Lääne piiskopkonna majandusmõis. 1573. aastal läänistati see Koluvere lahingus Rootsi vägesid juhtinud Claes Åkesson Tottile. Põhjasõja järel ehitasid Mandelstjernad mõisasüdame esinduslikult välja. Pikk ühekorruseline baroksete mõjudega peahoone koosneb keskosast ja kahest tiivast, mis olid algselt eraldi hooned ja ühendati 1867. aastal. 1869–1919 kuulus mõis Hoyningen-Huenedele.