Explorar o código

masking bugfix

Eric Wang %!s(int64=3) %!d(string=hai) anos
pai
achega
fac53721a2
Modificáronse 1 ficheiros con 0 adicións e 1 borrados
  1. 0 1
      finetune.py

+ 0 - 1
finetune.py

@@ -139,7 +139,6 @@ def generate_and_tokenize_prompt(data_point):
                 user_prompt,
                 truncation=True,
                 max_length=CUTOFF_LEN + 1,
-                padding="max_length",
             )["input_ids"]
         )
         - 1