З середини XIV століття воно входило до складу Великого Князівства Литовського. У складі Речі Посполитої (Республіки Обох Націй) 1506 р. — король Сигизмунд І відновив Дніпровську лінію оборони містечка Ржищів із наданим йому Магдебурзьким правом, фортеця на Іван-горі була відроджена в період правління Яна Казимира. За Богданом Залеським: за переказами, які він чув у дитинстві від людей і бандуриста, замок на Іван-горі належав князям Вишневецьким, а також Ружинським. Козацькі часи