Géologie des deux éminences
South Sugarloaf est composé d'arkose et de conglomérat déposés par d'anciens cours d'eau dans un bassin d'extension lors du début de la dislocation de la Pangée. North Sugarloaf, le plus élevé des deux à 241 m, repose sur le Basalte de Deerfield. Vus ensemble depuis Mount Toby de l'autre côté de la Connecticut River, South Sugarloaf apparaît à gauche et North à droite, les deux sommets enregistrant deux chapitres distincts de la même séquence de rift continental.
Tradition orale pocumtuck
La chercheuse abénaquise Margaret Bruchac documente une tradition orale pocumtuck dans laquelle South Sugarloaf est la tête d'un grand castor nommé Wequamps, le dos du Pocumtuck Ridge en formant le corps.
Le Summit House et la tradition des belvédères
Un Summit House a été construit sur South Sugarloaf en 1864, faisant de cette éminence un belvédère aménagé.