 Eric Wang
|
3b79ea4029
256 -> 512 -> 256
|
3 vuotta sitten |
|
Eric Wang
|
804d22ad43
remove asserts
|
3 vuotta sitten |
 Angainor Development
|
69b9d9ea8b
Fix a warning (#186)
|
3 vuotta sitten |
|
Eric J. Wang
|
dbd04f3560
Fix linters (#185)
|
3 vuotta sitten |
 NanoCode012
|
69b31e0fed
Feat: Add wandb (#168)
|
3 vuotta sitten |
 claysauruswrecks
|
1310547f9f
Add HF dataset loading, add linters, pyproject.toml (#175)
|
3 vuotta sitten |
|
Angainor Development
|
9d6b822019
Avoid a deprecation warning (#181)
|
3 vuotta sitten |
|
Eric Wang
|
683810b4a1
Print warning on checkpoint not found
|
3 vuotta sitten |
|
Eric Wang
|
da6b427a08
resume_from_checkpoint
|
3 vuotta sitten |
|
Eric Wang
|
b948f892ba
restore default settings
|
3 vuotta sitten |
|
Eric J. Wang
|
5fa807d106
Use CLI arguments (#159)
|
3 vuotta sitten |
|
Eric J. Wang
|
af30df1999
Unified tokenizer update PR (#146)
|
3 vuotta sitten |
|
Eric Wang
|
72aabcb5a4
Remove LLaMA download code, as a precaution
|
3 vuotta sitten |
|
Eric Wang
|
b12c3b90f8
Unwind input masking to avoid confusion
|
3 vuotta sitten |
|
Eric Wang
|
7fb06c6c22
Revert "Mask out prompt tokens for real"
|
3 vuotta sitten |
|
Eric Wang
|
2204a71505
set EPOCHS back to 3
|
3 vuotta sitten |
|
Eric Wang
|
4a712d4d8e
Mask out prompt tokens for real
|
3 vuotta sitten |
|
Eric Wang
|
fac53721a2
masking bugfix
|
3 vuotta sitten |
 Kohaku-Blueleaf
|
b5a1a0bca7
Add support for valid set size 0 (#83)
|
3 vuotta sitten |
|
Kohaku-Blueleaf
|
0af44f0262
Add option for output dir (#84)
|
3 vuotta sitten |
|
Kohaku-Blueleaf
|
450206caaf
Fix torch.compile call on windows (#81)
|
3 vuotta sitten |
|
Eric Wang
|
cfad895aa1
mask prompt in loss
|
3 vuotta sitten |
 Kakigōri Maker
|
9dab7ba438
add multi-gpu support (ddp) (#54)
|
3 vuotta sitten |
|
Eric Wang
|
f7044049ab
dataset cleaning, visualizations
|
3 vuotta sitten |
|
Eric Wang
|
35029da078
Validation set
|
3 vuotta sitten |
|
Eric Wang
|
5f6614e6fc
Catch outdated installs
|
3 vuotta sitten |
 andreas.echavez
|
1862976b33
Update alpaca-lora to use transformers main branch
|
3 vuotta sitten |
|
Eric Wang
|
2fa1c66388
repair tokenization logic, again
|
3 vuotta sitten |
|
Eric Wang
|
024dde7dab
Revert "fix <eos> tokenization"
|
3 vuotta sitten |
|
Eric Wang
|
6b69ea8665
fix <eos> tokenization
|
3 vuotta sitten |
