Його батько Федір Пилипович Різников був особистий дворянин, служив фельдшером, досягши, правда, одного з найменших чинів — колезького секретаря. Мав будинок у Конотопі, оцінений у 2 000 карбованців. Матір звали Олександра Михайлівна.