Update README.md
Browse files
README.md
CHANGED
|
@@ -39,6 +39,8 @@ W&B отчёт: https://api.wandb.ai/links/evilfreelancer/zj6s02v4
|
|
| 39 |
|
| 40 |
На всё про всё ушло примерно 18 часов на RTX 4090, при этом понадобилось 23.5Гб видеопамяти.
|
| 41 |
|
|
|
|
|
|
|
| 42 |
```yaml
|
| 43 |
output_dir: ./models/YandexGPT-5-Lite_7B_lora_thinking
|
| 44 |
train_path: ./train.YandexGPT-5-Lite_7B_lora_thinking.jsonl
|
|
|
|
| 39 |
|
| 40 |
На всё про всё ушло примерно 18 часов на RTX 4090, при этом понадобилось 23.5Гб видеопамяти.
|
| 41 |
|
| 42 |
+
Эффективный контекст 1400 токенов, так как больше не удалось уместить в 24Гб VRAM.
|
| 43 |
+
|
| 44 |
```yaml
|
| 45 |
output_dir: ./models/YandexGPT-5-Lite_7B_lora_thinking
|
| 46 |
train_path: ./train.YandexGPT-5-Lite_7B_lora_thinking.jsonl
|