Utviklingsminister Rory Stewart – som var en av lederkandidatene tidligere i prosessen – finansminister Philip Hammond og justisminister David Gauke har alle gjort det klart at de ikke vil sitte i Johnsons regjering.