Рудольф мав неврівноважений характер, любив подорожувати, описувати побачене, зловживав спиртними напоями, позашлюбними зав'язками, що викликало невдоволення Франца Йосифа, призводило до сварок з дружиною.