Числа двух любых прогонов рядом: ход, расход и прибавка в корпусе.
Сравниваются числа прогонов: ход, расход и прибавка в корпусе. Ответ на «стало ли лучше» — в столбце разницы.
Разница считается «правый минус левый». Знак не приговор: меньше токенов — хорошо, меньше фактов — смотря почему.
| показатель | №71 yp eval-alice | №78 yp eval-alice | разница |
|---|---|---|---|
| сделано | 0 | 0 | поровну |
| всего | 0 | 0 | поровну |
| вызовов модели | 60 | 588 | +528 |
| токенов | 46 197 | 449 786 | +403 589 |
| страниц затронуто | 0 | 0 | поровну |
| прибавилось: карточек объектов | 0 | 0 | поровну |
| прибавилось: фактов | 0 | 0 | поровну |
| прибавилось: правок чистки | 0 | 0 | поровну |
| прибавилось: сомнений в очереди | 0 | 0 | поровну |
| прибавилось: упоминаний | 0 | 0 | поровну |
| длительность, с | 620 | 5 954 | +5 334 |
| запросов Alice Pro | — | 1 856 | нет у одного из прогонов |
| токенов Alice Pro | — | 0 | нет у одного из прогонов |