Le musée occupe d'anciennes maisons médiévales dont le « donjon » Lacataye (14e s.), construit en pierre dite « coquillière » car des coquillages s'y sont incrustés il y a environ 2 000 ans. Il est dédié à la sculpture moderne figurative entre 1880 et 1950 : les oeuvres de Charles Despiau et Robert Wlérick (père de la statue équestre de Foch à Paris), tous deux natifs de la ville, sont présentées. La terrasse s'ouvre sur la ville et les forêts. Le jardin compte des sculptures monumentales de Despiau.