La page Wikipédia de Saint-Géréon indique "Manoir de la Chevasnerie". Localement les 2 noms existent. 
Vu la taille et l'allure du bâtiment, le terme "Manoir" me parait effectivement plus approprié (mais ça reste subjectif).