['thanks', 'so', 'much', 'for', 'coming', 'in', 'putting', 'up', 'with', 'a', 'few', 'minutes', 'of', 'technical', 'difficulties', 'okay', 'so', "I'm", 'here', 'to', 'give', 'a', 'lecture', 'today', 'on', 'exploration', 'and', 'meta', 'reinforcement', 'learning', 'and', 'so', 'this', 'is', 'just', 'a', 'little', 'outline', 'of', 'the', 'things', "I'm", 'planning', 'to', 'talk', 'about', 'so', 'first', "we're", 'gonna', 'recap', 'policy', 'gradient', 'and', 'how', 'we', 'can', 'use', 'that', 'to', 'build', 'some', 'metal', 'reinforcement', 'learning', 'algorithms', 'that', 'Chelsey', 'touched', 'on', 'last', 'week', 'and', 'then', "we're", 'going', 'to', 'look', 'at', 'the', 'problem', 'of', 'exploration', 'a', 'little', 'bit', 'more', 'deeply', 'and', 'finally', 'before', 'the', 'break', 'see', 'an', 'approach', 'to', 'encourage', 'better', 'exploration']
['NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'PUNCUATION_DIFF', 'CASE_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'UNKNOWN_TYPE_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'PUNCUATION_DIFF', 'CASE_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'PUNCUATION_DIFF', 'CASE_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'PUNCUATION_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'NO_DIFF', 'PUNCUATION_DIFF']