Ancien Site Gallor-omain
Au Viie siècle, saint Erme, né à Herly, qui n'est autre que l'actuel village de Saint-Erme, devenu moine dans l'abbaye de Lobbes en Belgique, fait don d'un domaine qu'il possédait à Herly, et où les moines de Lobbes fondèrent un prieuré. Saint Erme deviendra le deuxième abbé de Lobbes, et après sa mort, les moines changent le nom du prieuré de Herly en Saint-Erme.
En 1141, le prieuré de Saint-Erme est mentionné dans l'acte de confirmation de la fondation de l'abbaye de Vauclair.
À la fin du xvie siècle le prieuré passe à l'abbaye de Saint-Remi de Reims