Nella sua seconda autobiografia Barnard afferma di aver trascorso una notte d'amore con l'attrice italiana Gina Lollobrigida nel gennaio 1968, periodo in cui si trovava a Roma per un'udienza con Paolo VI. Nel 1970 contrae il secondo matrimonio con Barbara Zoellner, dalla quale avrà due figli. Il secondo matrimonio si conclude nel 1982; nel 1988 Barnard sposa la modella Karin Setzkorn, dalla quale ha altri due figli e dalla quale divorzia nel 2000.