La première moitié du XIXe siècle est encore, grâce à l'industrie de la toile et aux progrès agricoles, une période prospère au cours de laquelle est reconstruit, sur la place centrale, l'édifice du pouvoir et de l'activité économique. Ancienne salle d'audience de la vicomté, prison et halle aux grains : en 1836, le nouveau bâtiment en brique enduite est achevé, sur les plans de Lefèvre, entrepreneur du Bosc-Renoult, et comprend marché couvert, corps de garde et prison au rez-de-chaussée, halle des fils et lin, école et mairie à l'étage, à laquelle on accède par un escalier droit situé dans la cour centrale. Les deux maisons conservées à droite ont reçu des façades harmonisées avec le portique.

"Fort Montpellier" est le nom porté par l'ancien château féodal du Sap depuis 1153, en raison de la présence, à cette époque, du Comte de Montpellier, à qui Henri II Plantagenêt avait confié le gouvernement de ce château fort en remerciement des services qu'il avait rendu. Il se situait autrefois sur une île formée par les deux bras de la Vérette. Cet aspect insulaire est encore visible dans la rue du Bois Bénard. De ce côté, il est protégé par une sorte d'éperon terminé par une tourelle ronde découronnée. Démolie vers 1380 et après de multiples vicissitudes, la forteresse a été remplacée vers 1450 par un simple corps de logis à toit élevé dont seuls les pignons sont en pierre, l'un d'eux pouvant être un vestige du donjon. Le reste de l'édifice est en colombage avec de petits encorbellements. Le côté occidental est protégé par des ardoises.

Le Grand Fossé est le ruisseau qui s'écoule dans le village. Autrefois, le Grand Fossé servait de retranchement qui protégeait la place forte du SAP comme en témoignent les textes d'Orderic Vital.

L'écurie et la remise datent d'avant I 837. Tandis que les logements furent démolis et reconstruits dans les années 1830 avec une façade en briques avec des pilastres. Les édifices accueillirent la gendarmerie au début du XIXe siècle.

Maison en colombages du XVIe ou XVIIe siècle. C'est une des dernières maisons qui ne fut pas reconstruite en briques au XIXe siècle. Elle est, peut-être, la dernière maison originelle de Sap-en-Auge.