Il MuMa ha sede nel Palazzo Marchesale, imponente castello fondato nel 1393 e trasformato in palazzo signorile nel corso dei secoli. Fu la dimora di diverse famiglie nobiliari tra cui i D’Azzia, famiglia di origine napoletana, e i Perez Navarrete, famiglia di origine spagnola. Sul lato nord del palazzo si conserva ancora un breve tratto delle mura merlate e del fossato che in passato avevano il compito di proteggere il paese da eventuali attacchi provenienti dall’esterno; all’interno della corte è invece possibile ammirare lo splendido affresco, realizzato intorno alla metà del XVII secolo, raffigurante Sant’Anna con in braccio la Vergine bambina.