В Любомлі князь укривався від татарського князя Ногая, у цьому місті він любив відпочивати, та так, що, за словами літописців, душа його раділа і в благості перебувала. В народі добра пам'ять залишилась про князя і народ багато вже століть передає легенду про те, що князь одного разу вигукнув тут слова «любо мне здесь» («любо мені тут»). За легендою, саме від слів «любо мне» і пішла назва Любомль — улюблене місто князя.