Le Panch Mahal (palais à cinq étages), qui se reconnaît de loin à sa haute silhouette triangulaire, marque la séparation avec le quartier des hommes. Ses cinq étages hypostyles, de surface décroissante, se superposent comme un château de cartes. Les 176 colonnes sculptées sont toutes différentes, dit-on. L'édifice devait être autrefois clos par des jali, qui captaient la brise et le transformaient en un lieu idéal où dormir par les chaudes nuits d'été.