Outils pour utilisateurs

Outils du site


aitextgen

Différences

Ci-dessous, les différences entre deux révisions de la page.

Lien vers cette vue comparative

Les deux révisions précédentesRévision précédente
Prochaine révisionLes deux révisions suivantes
aitextgen [2020/07/02 17:10] – [OpenAI] sergeaitextgen [2020/07/05 11:58] – [Fables de La Fontaine] serge
Ligne 79: Ligne 79:
 def training(): def training():
     file_name  =  "./fables.txt"     file_name  =  "./fables.txt"
-    train_tokenizer(file_name)+    train_tokenizer(file_name, vocab_size=20000)
     vocab_file = "aitextgen-vocab.json"     vocab_file = "aitextgen-vocab.json"
     merges_file = "aitextgen-merges.txt"     merges_file = "aitextgen-merges.txt"
aitextgen.txt · Dernière modification : 2022/02/08 15:59 de serge