@staticmethod
def title():
    text = list()
    text.append('{:^20}'.format('Epi'))
    text.append('{:^10}'.format('time'))
    text.append('{:^9}'.format('lr'))
    text.append('{:^9}'.format('noise'))
    text.append('{:^12}'.format('buffer size'))
    text.append('{:^9}'.format('#of updates'))
    text.append('{:^20}'.format('average_reward'))
    text.append('{:^20}'.format('actor grad norm'))
    text.append('{:^20}'.format('critic grad norm'))
    text.append('{:^9}'.format('q_loss'))
    text.append('{:^6}'.format('rewards'))
    return ' | '.join(text)
@staticmethod
def title():
    text = list()
    text.append('{:^20}'.format('Epi'))
    text.append('{:^10}'.format('time'))
    text.append('{:^9}'.format('lr'))
    text.append('{:^9}'.format('noise'))
    text.append('{:^12}'.format('buffer size'))
    text.append('{:^9}'.format('#of updates'))
    text.append('{:^20}'.format('average_reward'))
    text.append('{:^20}'.format('actor grad norm'))
    text.append('{:^20}'.format('critic grad norm'))
    text.append('{:^9}'.format('q_loss'))
    text.append('{:^6}'.format('rewards'))
    return ' | '.join(text)