Bâti à partir du 16e s. sur un rocher dominant le Rhône, ce petit château à « donjon » carré et ceinture de bastions, est devenu au 19e s. partie intégrante des fortifications Dufour (du nom du général suisse). Élevées en 1831, ces fortifications visaient à défendre la Confédération, car on craignait à l'époque une guerre en Europe. Le château abrite une galerie qui accueille des expositions temporaires consacrées au dessin sous toutes ses formes, en particulier la bande dessinée et l'illustration.