2025-08-01 08:26:33 +03:00
|
|
|
|
# benchmark_cherrypick
|
|
|
|
|
|
|
2025-08-06 13:35:39 +03:00
|
|
|
|
Бенчмарки производительности и возможностей DI-контейнера cherrypick (core).
|
2025-08-01 08:26:33 +03:00
|
|
|
|
|
|
|
|
|
|
## Сценарии
|
|
|
|
|
|
|
2025-08-06 13:35:39 +03:00
|
|
|
|
- **RegisterAndResolve**: базовая регистрация и разрешение зависимости.
|
2025-08-06 13:48:51 +03:00
|
|
|
|
- **ChainSingleton** (A->B->C, singleton): длинная цепочка зависимостей, все как singleton.
|
|
|
|
|
|
- **ChainFactory** (A->B->C, factory): цепочка зависимостей через factory (новый объект на каждый запрос).
|
|
|
|
|
|
- **NamedResolve** (by name): разрешение зависимости по имени среди нескольких реализаций.
|
|
|
|
|
|
- **AsyncChain** (A->B->C, async): асинхронная цепочка зависимостей.
|
|
|
|
|
|
- **ScopeOverride** (child overrides parent): перекрытие зависимости в дочернем scope относительно родителя.
|
2025-08-01 08:26:33 +03:00
|
|
|
|
|
2025-08-06 13:35:39 +03:00
|
|
|
|
## Возможности
|
2025-08-01 08:26:33 +03:00
|
|
|
|
|
2025-08-06 13:48:51 +03:00
|
|
|
|
- **Унифицированная структура бенчмарков**
|
|
|
|
|
|
- **Гибкая параметризация CLI (chainCount, nestingDepth, repeats, warmup, сценарий, формат)**
|
|
|
|
|
|
- **Автоматический матричный запуск для наборов параметров**
|
|
|
|
|
|
- **Статистика: среднее, медиана, stddev, min, max для каждого сценария**
|
|
|
|
|
|
- **Вывод в таблицу, CSV или JSON**
|
|
|
|
|
|
- **Прогревочные запуски до замера времени для стабильности**
|
2025-08-01 08:26:33 +03:00
|
|
|
|
|
2025-08-06 13:35:39 +03:00
|
|
|
|
## Как запустить
|
2025-08-01 08:26:33 +03:00
|
|
|
|
|
2025-08-06 13:35:39 +03:00
|
|
|
|
1. Установить зависимости:
|
2025-08-01 08:26:33 +03:00
|
|
|
|
```shell
|
|
|
|
|
|
dart pub get
|
|
|
|
|
|
```
|
2025-08-06 13:48:51 +03:00
|
|
|
|
2. Запустить все бенчмарки (по умолчанию: одни значения, repeat=5, warmup=2):
|
2025-08-01 08:26:33 +03:00
|
|
|
|
```shell
|
|
|
|
|
|
dart run bin/main.dart
|
|
|
|
|
|
```
|
|
|
|
|
|
|
2025-08-06 13:48:51 +03:00
|
|
|
|
### Пользовательские параметры
|
2025-08-06 13:35:39 +03:00
|
|
|
|
|
2025-08-06 13:48:51 +03:00
|
|
|
|
- Матричный прогон (csv, 7 повторов, 3 прогрева):
|
2025-08-06 13:35:39 +03:00
|
|
|
|
```shell
|
2025-08-06 13:48:51 +03:00
|
|
|
|
dart run bin/main.dart --benchmark=chain_singleton --chainCount=10,100 --nestingDepth=5,10 --repeat=7 --warmup=3 --format=csv
|
2025-08-06 13:35:39 +03:00
|
|
|
|
```
|
|
|
|
|
|
|
2025-08-06 13:48:51 +03:00
|
|
|
|
- Только сценарий с именованным разрешением:
|
2025-08-06 13:35:39 +03:00
|
|
|
|
```shell
|
2025-08-06 13:48:51 +03:00
|
|
|
|
dart run bin/main.dart --benchmark=named --repeat=3 --warmup=1
|
2025-08-06 13:35:39 +03:00
|
|
|
|
```
|
|
|
|
|
|
|
2025-08-06 13:48:51 +03:00
|
|
|
|
- Посмотреть все флаги CLI:
|
2025-08-06 13:35:39 +03:00
|
|
|
|
```shell
|
|
|
|
|
|
dart run bin/main.dart --help
|
|
|
|
|
|
```
|
|
|
|
|
|
|
2025-08-06 13:48:51 +03:00
|
|
|
|
#### Опции CLI
|
2025-08-06 13:35:39 +03:00
|
|
|
|
|
2025-08-06 13:48:51 +03:00
|
|
|
|
- `--benchmark` (`-b`) — Сценарий:
|
|
|
|
|
|
`register`, `chain_singleton`, `chain_factory`, `named`, `override`, `async_chain`, `all` (по умолчанию all)
|
|
|
|
|
|
- `--chainCount` (`-c`) — Длины цепочек через запятую. Напр: `10,100`
|
|
|
|
|
|
- `--nestingDepth` (`-d`) — Глубины цепочек через запятую. Напр: `5,10`
|
|
|
|
|
|
- `--repeat` (`-r`) — Сколько раз мерить каждую конфигурацию (`по умолчанию: 5`)
|
|
|
|
|
|
- `--warmup` (`-w`) — Сколько прогревочных запусков до замера времени (`по умолчанию: 2`)
|
|
|
|
|
|
- `--format` (`-f`) — Вывод: `pretty`, `csv`, `json` (по умолчанию pretty)
|
|
|
|
|
|
- `--help` (`-h`) — Показать справку
|
2025-08-06 13:35:39 +03:00
|
|
|
|
|
|
|
|
|
|
#### Пример вывода (`--format=csv`)
|
|
|
|
|
|
```
|
2025-08-06 13:48:51 +03:00
|
|
|
|
benchmark,chainCount,nestingDepth,mean_us,median_us,stddev_us,min_us,max_us,trials,timings_us
|
|
|
|
|
|
ChainSingleton,10,5,2450000,2440000,78000,2290000,2580000,5,"2440000;2460000;2450000;2580000;2290000"
|
2025-08-06 13:35:39 +03:00
|
|
|
|
```
|
2025-08-01 08:26:33 +03:00
|
|
|
|
|
|
|
|
|
|
---
|
|
|
|
|
|
|
2025-08-06 13:48:51 +03:00
|
|
|
|
## Как добавить свой бенчмарк
|
2025-08-06 13:35:39 +03:00
|
|
|
|
|
2025-08-06 13:48:51 +03:00
|
|
|
|
1. Создайте Dart-файл с классом, унаследованным от `BenchmarkBase` или `AsyncBenchmarkBase`.
|
|
|
|
|
|
2. Используйте миксин `BenchmarkWithScope` для управления Scope (если нужно).
|
|
|
|
|
|
3. Добавьте ваш бенчмарк в bin/main.dart для запуска через CLI.
|
2025-08-06 13:35:39 +03:00
|
|
|
|
|
|
|
|
|
|
---
|
|
|
|
|
|
|
|
|
|
|
|
## Пример для контрибуторов
|
|
|
|
|
|
|
|
|
|
|
|
```dart
|
|
|
|
|
|
class MyBenchmark extends BenchmarkBase with BenchmarkWithScope {
|
|
|
|
|
|
MyBenchmark() : super('My custom');
|
|
|
|
|
|
@override void setup() => setupScope([MyModule()]);
|
|
|
|
|
|
@override void run() { scope.resolve<MyType>(); }
|
|
|
|
|
|
@override void teardown() => teardownScope();
|
|
|
|
|
|
}
|
|
|
|
|
|
```
|
|
|
|
|
|
|
|
|
|
|
|
---
|
|
|
|
|
|
|
|
|
|
|
|
## Лицензия
|
|
|
|
|
|
|
|
|
|
|
|
MIT
|