Il s'est marié la première fois à Harriet Sovina Gilbert le . Ils eurent 2 fils, Albert Gallatin et Gilbert. Harriet est décédée le à Green Bay à l'âge de 23 ans.
La seconde fois il épousa Eliza D. Chappel le à Rockford (Illinois). Ils eurent 7 enfants: Virginia, Ruth, Frank Holmes, Grace, Frederick Wolcott, Jenny May, et James Wolcott. Eliza est décédée le à Green Bay à l'âge de 40 ans.
Et enfin il épousa Ruth K. Gillette le à Détroit. Ils n'ont pas eu d'enfants.