# Чек-лист: как выбрать модель и не потратить три недели

Печатается на одну страницу. Порядок важен: шаги 1 и 2 отсекают половину кандидатов
за 5 минут, а шаг 4 стоит целого дня.

## Шаг 1. Померьте свой текст · минуты

- [ ] Посчитал длину типового текста в токенах (примерно: слова × 2,7 для русского)
- [ ] Сравнил с окном контекста модели
- [ ] Текст больше окна - **модель отсеяна**, никакое железо не поможет

## Шаг 2. Посчитайте память · минуты

- [ ] Взял вес файла модели
- [ ] Прибавил место под окно: примерно 0,12 ГБ на каждую 1000 токенов окна
- [ ] Сравнил со **свободной** памятью, а не с общей
- [ ] Посмотрел, занят ли своп. Занят - свободной памяти у вас уже нет
- [ ] Оставил запас под систему: минимум 0,7 ГБ

## Шаг 3. Напишите линейку · час, до первого замера

- [ ] Сформулировал, что считается хорошим результатом
- [ ] Выразил это числами, которые считает код
- [ ] Записал пороги в файл с датой
- [ ] Проверил, что линейка ловит и выдумку, и пустоту: по отдельности каждая метрика врёт
- [ ] Записал, чего линейка **не** ловит. Это честнее и избавляет от сюрпризов

## Шаг 4. Прогоните всех · день

- [ ] Один и тот же живой пример для всех кандидатов, не выдуманный
- [ ] Один и тот же промпт
- [ ] Результаты в таблицу: качество, время, цена за один прогон
- [ ] Отметил, кто не дошёл до результата и почему именно

## Шаг 5. Слепая вычитка · вечер

- [ ] Отдал 2-3 лучших результата тому, кто будет этим пользоваться
- [ ] Без подписей, какой моделью сделан каждый
- [ ] Записал его выбор и его слова дословно
- [ ] Сравнил с таблицей. Разошлось - прав он, а не таблица

## Шаг 6. Спросите провайдера · до запуска

- [ ] Сохраняете ли вы текст запроса и на какой срок
- [ ] Где физически считается модель
- [ ] Можно ли выключить сохранение, подтверждается ли документом
- [ ] Ответы сохранил письменно. Ответа нет - зафиксировал сам факт запроса

## Шаг 7. После запуска

- [ ] Стоимость одного прогона пишется в журнал, а не оценивается на глаз
- [ ] Замеры тоже тратят деньги: они идут в тот же журнал
- [ ] Зависшая задача зовёт владельца сама
- [ ] Раз в месяц пересматриваю цены: они меняются быстрее, чем кажется

---

Евгений Ганимар · @ganimarketing
