Nën themelet e kishës së vjetër në këtë pjesë të qytezës janë zbuluar themelet e bazilikës bizantine, ndërsa nga vet Lipjani janë të njohura disa monumente - epigrafe, prej të cilave vërtetohen të dhënat për ekzistimin e Ulpianës.