La prima moglie fu Elizabeth Ellis, detta Lib, Libby o Betty, che al tempo lavorava come segretaria a Utica. Dopo cinque anni di fidanzamento, Masters le propose il matrimonio nel 1942. Fu una cerimonia modesta, svoltasi a Detroit. Nel 1950 ebbero una figlia, Sarah, detta "Sali" e l'anno seguente un figlio, William Howell Jr.