Наприкінці 1763 року він отримав пропозицію від Чарльза Тауншенда, за рекомендацією Девіда Юма, стати вихователем для свого пасинка, Генрі Скотта, молодого герцога Баклю. Сміт погоджується на пропозицію і подає у відставку з посади професора. Виховательство та подорожі