Facilement accessible par le train depuis Poughkeepsie, elle devient leur résidence estivale, un refuge loin de l'agitation universitaire. Keene n'est pourtant pas une bourgade endormie : écoles, industries, concerts et transports en font alors une petite ville particulièrement dynamique.
Jean-Charlemagne s'attache à cette cité. Dès 1902, il contribue à enrichir la bibliothèque publique de Keene en ouvrages français, poursuivant ainsi, jusque dans sa ville d'adoption, son travail de passeur entre les cultures française et américaine.
C'est aux « Ombrages » qu'il s'éteint, le 18 décembre 1934, à l'âge de 81 ans, emporté en quelques jours par une pneumonie. Ses obsèques sont célébrées le 20 décembre au temple baptiste de Keene