Upload 2 files

insert_punctuation.py

@@ -36,7 +36,7 @@ class punctuation_predictor(torch.nn.Module):
 
 
 model = punctuation_predictor(base_model)
-model.load_state_dict(torch.load("punctuation_position_model.pth"))
+model.load_state_dict(torch.load("weight/punctuation_position_model.pth"))
 model.eval()
 
 
@@ -82,6 +82,6 @@ def process_long_text(text, max_length=256, comma_thresh=0.1, period_thresh=0.1)
 if __name__ == "__main__":
     print(
         process_long_text(
-            "句読点ありバージョンを書きました句読点があることで僕は逆に読みづらく感じるので句読点無しで書きたいと思います",
+            "女は昨夕艶めかしい姿をして彼の浴室の戸を開けた人に違なかった風呂場で彼を驚ろかした大きな髷をいつの間にか崩して尋常の束髪に結い更えたので彼はつい同じ人と気がつかずにいた彼はさらに声を聴いただけで顔を知らなかった伴の男の方をよそながらの初対面といった風に女と眺め比べた",
         )
     )

train.py

@@ -175,4 +175,4 @@ for epoch in range(10):
         epoch_loss += loss.item()
         progress_bar.set_postfix({"loss": epoch_loss / len(data_loader)})
 # %%
-torch.save(model.state_dict(), "punctuation_position_model.pth")
+torch.save(model.state_dict(), "weight/punctuation_position_model.pth")