for row in sheet.rows[1:]:
    for index, cell in enumerate(row):
        if index in col_indices:
            print('col: {}, row: {}, content: {}'.format(col_indices[index],
                index, cell.value))
if cell.value.upper() == 'OldValue1':
    cell.value = 1
elif cell.value.upper() == 'OldValue2':
    cell.value = 2
Как использовать имя поля или заголовок столбца в openpyxl?