Victor e il suo fratello gemello Vincent McKusick sono nati il ​​21 ottobre 1921. Victor era uno di cinque figli. Suo padre era laureato al Bates College. Prima di decidere di lavorare in una fattoria, il padre di Victor era stato preside di una scuola superiore a Chester, nel Vermont. La madre di Victor era stata un'insegnante di scuola elementare prima di sposarsi. Victor e i suoi fratelli crebbero in un caseificio a Parkman, nel Maine.