Herman giftet seg med Anne Regitze Coldevin 31 Mai 1752. Anne (datter av Jørgen (Georg) Isachsen Coldevin og Ellen Anna Hornemann) ble født cirka Nov 1720 , Rissa; ble døpt 22 Nov 1720; døde 8 Jun 1768. [Gruppeskjema] [Familiediagram]

1. Ellen Sophia Coldevin Bay ble født 26 Jul 1753 , Verdal; døde 1 Aug 1814.
2. Petrine Christine Cecilie Bay ble født 13 Okt 1754 , Verdal; døde 13 Jan 1839, Trondheim, Sør-Trøndelag, Norge.
3. Anne Margrethe Bay ble født 14 Feb 1757; døde cirka 1757.
4. Jørgen Nicolaus Lucas Winther Bay ble født 9 Des 1758 , Ytterøy; døde 11 Jan 1818, Skogn, Levanger, Nord-Trøndelag, Norge; ble begravet 27 Jan 1818, Skogn, Levanger, Nord-Trøndelag, Norge.

Herman giftet seg med Bolette Tønder 26 Jun 1773. Bolette (datter av Niels Ebbesen Tønder og Margrethe Christine Hass) ble født 11 Mai 1734; døde 7 Mar 1774. [Gruppeskjema] [Familiediagram]