Construit entre 1532 et 1542 pour le chancelier de Granvelle, Nicolas Perrenot, ce superbe bâtiment Renaissance témoigne de l'ouverture de l'architecture comtoise aux influences italiennes, et de la prospérité de la ville au 16e s. Remarquez en particulier la jolie cour intérieure entourée de portiques aux arcades surbaissées, en anse de panier. Depuis 2002, le palais abrite le musée du Temps.