simple-llm

mirror of https://github.com/pese-git/simple-llm.git synced 2026-01-23 21:14:17 +00:00

Files

Sergey Penkovsky c56a3e80c9 Реализация класса GetData

- Добавлен класс GetData для работы с последовательными данными
- Реализован функционал:
  * Создание датасета из последовательности
  * Автоматическое формирование пар (input, target)
  * Поддержка CPU/GPU
  * Проверка корректности параметров
- Добавлены тесты для проверки функционала
- Создан пример использования в example/
- Добавлена документация с блок-схемой в doc/
- Обновлен README.md с информацией о новом классе

2025-07-22 17:10:28 +03:00

__init__.py

feat: implement bpe algorithm

2025-07-11 12:21:33 +03:00

decoder_example.py

Реализация Decoder для трансформера

2025-07-21 11:00:49 +03:00

example_bpe.py

docs(example): update BPE example with encode/decode demonstration

2025-07-12 11:46:57 +03:00

example_get_data.py

Реализация класса GetData