Zogu ishte vetëm dy-ditësh kur familja e tij u largua nga Shqipëria gjatë pushtimit italian më 1939. I ati i tij u shfronësua nga komunistët në 1946 dhe caktoi djalin e tij si pasues përpara se të vdiste në 1961.
Zogu, ailesi 1939 yılındaki İtalyan işgali sırasında Arnavutluk'tan kaçtığı sırada yalnızca iki yaşındaydı. 1946 yılında tahttan indirilen babası 1961 yılında ölmeden önce yerine oğlunun geçmesini vasiyet etti.