Уже в чотири роки став сиротою. Після смерті обох батьків, Бертрана і двох його старших братів взяла під свою опіку їхня бабуся, графиня Рассел, яка дотримувалась пуританських поглядів. Любив проводити час за читанням книг із великої бібліотеки, зібраною ще дідусем в маєтку Пембрук Лодж.