パメラ・コールマン・スミス
ロンドン中心部のピムリコに生まれる。父はブルックリン生まれのアメリカ人商人、チャールズ・エドワード・スミス（祖父はブルックリンの市長だったサイラス・ポーター・スミス）、母はコーニー・コールマン（兄弟に画家のサミュエル・コールマンがいる）で、この二人の間にできた唯一の子であった。一家は、パメラが10歳になるまではマンチェスターにいたが、その後1889年に父チャールズが西インド改善会社（ジャマイカの鉄道事業の拡張に関与していた金融企業連合）に職を得た際に、ジャマイカに移住している。一家はジャマイカのキングストンに数年の間居を定めたものの、ジャマイカとロンドン、そしてニューヨークのブルックリンの間を往復していた。
ハワード・アレグザンダー・スミス
ニューヨーク市にて、医師、教師のエイブラム・アレグサンダー () とスー・レーン・スミス（、旧姓ベンダー）との間に出生。ニューヨーク州のに通い、ニュージャージー州のプリンストン大学に進学。プリンストンでは法学と政治学を学び、またウッドロウ・ウィルソンの下で英国慣習法を学んだ。1901年に卒業して文学士を授与され、1904年にコロンビア大学法科大学院から法学士を授与された。