@staticmethod
def title_csv():
    text = list()
    text.append('{}'.format('Epi'))
    text.append('{}'.format('time'))
    text.append('{}'.format('lr'))
    text.append('{}'.format('noise'))
    text.append('{}'.format('buffer size'))
    text.append('{}'.format('#of updates'))
    text.append('{}'.format('average_reward'))
    text.append('{}'.format('actor grad norm'))
    text.append('{}'.format('critic grad norm'))
    text.append('{}'.format('q_loss'))
    text.append('{}'.format('rewards'))
    return text
@staticmethod
def title_csv():
    text = list()
    text.append('{}'.format('Epi'))
    text.append('{}'.format('time'))
    text.append('{}'.format('lr'))
    text.append('{}'.format('noise'))
    text.append('{}'.format('buffer size'))
    text.append('{}'.format('#of updates'))
    text.append('{}'.format('average_reward'))
    text.append('{}'.format('actor grad norm'))
    text.append('{}'.format('critic grad norm'))
    text.append('{}'.format('q_loss'))
    text.append('{}'.format('rewards'))
    return text