Крім того, кілька двоюрідних братів жили з родиною. Він також був родичем Томаса Джефферсона, обидва є нащадками колоністів Вірджинії Вільяма Рендольфа, але Маршалл і Джеферсон будуть протистояти один одному з багатьох політичних питань. З юних років він був відомий своїм гарним настроєм і чорними очима, які були «сильним і проникливим, сяючи з розумом і добротою».