ai-forever
commited on
Commit
•
190b067
1
Parent(s):
757bcec
Update README.md
Browse files
README.md
CHANGED
@@ -34,7 +34,7 @@ device='cuda'
|
|
34 |
model.to(device)
|
35 |
|
36 |
#Prefix <LM>
|
37 |
-
lm_text='
|
38 |
input_ids=torch.tensor([tokenizer.encode(prefix_LM+lm_text)]).to(device)
|
39 |
outputs=model.generate(input_ids,eos_token_id=tokenizer.eos_token_id,early_stopping=True)
|
40 |
print(tokenizer.decode(outputs[0][1:]))
|
@@ -42,7 +42,7 @@ print(tokenizer.decode(outputs[0][1:]))
|
|
42 |
# print result: с того, что он был в плену у немцев.</s>
|
43 |
|
44 |
#Prefix <SC1>
|
45 |
-
lm_text='<SC1>Принялся Кутузов рассказывать свою историю
|
46 |
input_ids=torch.tensor([tokenizer.encode(prefix_LM+lm_text)]).to(device)
|
47 |
outputs=model.generate(input_ids,eos_token_id=tokenizer.eos_token_id,early_stopping=True)
|
48 |
print(tokenizer.decode(outputs[0][1:]))
|
@@ -50,7 +50,7 @@ print(tokenizer.decode(outputs[0][1:]))
|
|
50 |
#print result: '<extra_id_0>, как он жил</s>'
|
51 |
|
52 |
# Prefix <SC5>
|
53 |
-
lm_text='<SC5>Принялся Кутузов рассказывать свою историю
|
54 |
input_ids=torch.tensor([tokenizer.encode(prefix_LM+lm_text)]).to(device)
|
55 |
outputs=model.generate(input_ids,eos_token_id=tokenizer.eos_token_id,early_stopping=True,max_length=100)
|
56 |
print(tokenizer.decode(outputs[0][1:]))
|
|
|
34 |
model.to(device)
|
35 |
|
36 |
#Prefix <LM>
|
37 |
+
lm_text='<LM>Принялся Кутузов рассказывать свою историю как он сюда попал. Началось'
|
38 |
input_ids=torch.tensor([tokenizer.encode(prefix_LM+lm_text)]).to(device)
|
39 |
outputs=model.generate(input_ids,eos_token_id=tokenizer.eos_token_id,early_stopping=True)
|
40 |
print(tokenizer.decode(outputs[0][1:]))
|
|
|
42 |
# print result: с того, что он был в плену у немцев.</s>
|
43 |
|
44 |
#Prefix <SC1>
|
45 |
+
lm_text='<SC1>Принялся Кутузов рассказывать свою историю <extra_id_0>. Началось с того, что он был в армии, служил в артиллерии.'
|
46 |
input_ids=torch.tensor([tokenizer.encode(prefix_LM+lm_text)]).to(device)
|
47 |
outputs=model.generate(input_ids,eos_token_id=tokenizer.eos_token_id,early_stopping=True)
|
48 |
print(tokenizer.decode(outputs[0][1:]))
|
|
|
50 |
#print result: '<extra_id_0>, как он жил</s>'
|
51 |
|
52 |
# Prefix <SC5>
|
53 |
+
lm_text='<SC5>Принялся Кутузов рассказывать свою историю <extra_id_0>. Началось с того, что он был в армии, служил в артиллерии.'
|
54 |
input_ids=torch.tensor([tokenizer.encode(prefix_LM+lm_text)]).to(device)
|
55 |
outputs=model.generate(input_ids,eos_token_id=tokenizer.eos_token_id,early_stopping=True,max_length=100)
|
56 |
print(tokenizer.decode(outputs[0][1:]))
|