
Модель для генерации русских текстов по вселенной Warhammer40k (от ереси Хоруса до свежих книг)


## Для пользователей text-generation-webui
В инструменте поломана работа с GPT-2, GPTJ, GPT-NEO и аналогичными модлями, неверно загружается токенизер.
Ошибка такая:<br>
>eos_token_id = eos_token_id[0]
>IndexError: list index out of range

Исправляется легко, в файл modules/models.py в функцию load_tokenizer() надо добавить строчку<br>
<code>tokenizer.eos_token_id = 2</code><br>
перед<br>
<code>return tokenizer</code>

{"language": ["ru"], "license": "apache-2.0", "library_name": "transformers", "tags": ["warhammer", "warhammer40k"], "pipeline_tag": "text-generation", "widget": [{"text": "\u041a\u043e\u043d\u0440\u0430\u0434 \u041a\u0435\u0440\u0437 \u043f\u043e\u0434\u043e\u0448\u0435\u043b \u043a \u043e\u0433\u0440\u043e\u043c\u043d\u044b\u043c \u0432\u043e\u0440\u043e\u0442\u0430\u043c"}, {"text": "\u0411\u043e\u043b\u0442\u0435\u0440 \u0431\u044b\u043b \u0443\u043a\u0440\u0430\u0448\u0435\u043d"}, {"text": "\u0422\u043e\u043b\u043f\u0430 \u0445\u0430\u043e\u0441\u0438\u0442\u043e\u0432 \u043f\u0440\u0438\u0431\u043b\u0438\u0436\u0430\u043b\u0430\u0441\u044c"}, {"text": "\u042d\u0442\u043e \u0431\u044b\u043b \u0438\u043d\u043a\u0432\u0438\u0437\u0438\u0442\u043e\u0440"}]}
transformers pytorch safetensors gpt2 text-generation warhammer warhammer40k ru license:apache-2.0 autotrain_compatible endpoints_compatible text-generation-inference region:us
TAGS
#transformers #pytorch #safetensors #gpt2 #text-generation #warhammer #warhammer40k #ru #license-apache-2.0 #autotrain_compatible #endpoints_compatible #text-generation-inference #region-us 


Модель для генерации русских текстов по вселенной Warhammer40k (от ереси Хоруса до свежих книг)


## Для пользователей text-generation-webui
В инструменте поломана работа с GPT-2, GPTJ, GPT-NEO и аналогичными модлями, неверно загружается токенизер.
Ошибка такая:<br>
>eos_token_id = eos_token_id[0]
>IndexError: list index out of range

Исправляется легко, в файл modules/URL в функцию load_tokenizer() надо добавить строчку<br>
<code>tokenizer.eos_token_id = 2</code><br>
перед<br>
<code>return tokenizer</code>

## Для пользователей text-generation-webui
В инструменте поломана работа с GPT-2, GPTJ, GPT-NEO и аналогичными модлями, неверно загружается токенизер.
Ошибка такая:<br>
>eos_token_id = eos_token_id[0]
>IndexError: list index out of range

Исправляется легко, в файл modules/URL в функцию load_tokenizer() надо добавить строчку<br>
<code>tokenizer.eos_token_id = 2</code><br>
перед<br>
<code>return tokenizer</code>
TAGS
#transformers #pytorch #safetensors #gpt2 #text-generation #warhammer #warhammer40k #ru #license-apache-2.0 #autotrain_compatible #endpoints_compatible #text-generation-inference #region-us 
 ## Для пользователей text-generation-webui
В инструменте поломана работа с GPT-2, GPTJ, GPT-NEO и аналогичными модлями, неверно загружается токенизер.
Ошибка такая:<br>
>eos_token_id = eos_token_id[0]
>IndexError: list index out of range

Исправляется легко, в файл modules/URL в функцию load_tokenizer() надо добавить строчку<br>
<code>tokenizer.eos_token_id = 2</code><br>
перед<br>
<code>return tokenizer</code>