Le chef-lieu de la seigneurie de Glos était situé auprès de l’église Saint-Vincent, à l’entrée de la prairie. Le château a été reconstruit par la suite un peu plus loin, sur les terres du fief de Sahurs vers Montfort-sur-Risle. L’ancien emplacement est encore marqué par un colombier et un manoir roman du XIIème siècle, l’ensemble est inscrit à l’inventaire supplémentaire des Monuments Historiques depuis le 27 avril 1999. Glos-sur-Risle comprenait plusieurs fiefs. Toutefois, un seigneur Guy de Glos est attesté en 1090 et donne, avec sa femme Anserada, à l’abbaye du Bec, les possessions qu’ils tiennent à Fontainecourt et Thierville. En outre, en 1140 un autre Gauthier de Glos donne une rente aux chanoines de Bourg-Achard.
S’agissant des occupants du Manoir seigneurial, il est attesté qu’au XIIème siècle un château fort érigé par la famille de Grente se trouvait sur le territoire de Glos à côté de l’Église. Manifestement, la famille de Grente fut en possession du chef-lieu de la seigneurie. Notons par ailleurs qu’Hugues de Grente participa à la bataille d’Hastings aux côtés du Duc Guillaume en 1066.