Заранее определите приёмку
Запишите точный идентификатор модели, формат запросов, характер нагрузки и ограничения на данные. Отделите обязательное от удобного. Большой каталог не компенсирует неподходящий формат инструментов или неприемлемое хранение информации.
До испытаний установите критерии: корректные обязательные поля, верные ответы на известные примеры и завершение в заданный срок. Выбирайте цели под свою нагрузку, а не копируйте предел задержки другого приложения.
Найдите ответственного оператора
Различайте разработчика, посредника, шлюз и оператора размещения. Уточните, кто принимает оплату, оказывает поддержку и обрабатывает запросы. Знакомое название не доказывает официальное партнёрство или одинаковое поведение разных развёртываний.
Создайте карточку доказательств: юридическое лицо, ссылка на условия, дата проверки, канал поддержки и открытые вопросы. Выясните возможность смены вышестоящего поставщика и порядок уведомления об изменениях моделей или обработки данных.
Сравнивайте воспроизводимо
Используйте одинаковые несекретные примеры и настройки. Добавьте обычные запросы, длинный ввод, неверные параметры и обрывы потока. Повторяйте испытания в нужное время: успешная демонстрация не устанавливает устойчивость работы.
Для каждой попытки запишите время, интерфейс, запрошенную и заявленную модель, параметры, идентификатор запроса, результат, ошибку, первый ответ, полную длительность и расход. Оценивайте правильность отдельно от скорости: быстрый отказ не должен считаться успехом.
Оставьте возможность пересмотра
Выбирайте после прохождения обязательных проверок и объяснения расхождений в оплате. Начните с малого баланса, проверьте экспорт статистики и отзыв ключей. Сохраните исходные результаты для будущего сравнения.
Запишите причины отказа от альтернатив, а не только победителя. Повторяйте оценку при смене маршрутизации, версии, владельца или договора: пригодность может измениться даже без заметного перемещения в индексе.