Музею первісно віддали лише другий поверх. Перший поверх посіли художній інститут і училище, майстерні художнього фонду, обласне правління Спілки художників, їдальня райтресту. Лише на початку 1950-х споруда стала повністю належати Художньому музеєві. Будинок-палац Івана Ігнатищева