Надалі він критикував всі розробки ядерної зброї, особливо, випробування його на атолі Бікіні, а свою причетність до прискорення робіт над американською ядерною програмою вважав найбільшою трагедією свого життя. Широку популярність здобуло звернення ученого до президента США Гаррі Трумена з приводу загрози ядерної війни: «Я не знаю, якою зброєю вестиметься третя світова війна, але четверта — палицями і камінням» (інколи наводиться такий варіант: «Я не знаю, чи буде третя світова війна, але четвертої — не буде»).