Розлучившись з першою дружиною Олександрою Герцик, він зв'язав життя з актрисою Г. Сергеєвою (1914—2000), яка народила йому двох дочок, та під старість залишила його. Творчість Іван Козловський володів гарним голосом світлого сріблястого тембру, широкого діапазону з вільним верхнім регістром. Наталя Шпіллер відзначала: