Независимая проверка LLM API Открытая бета
Не верьте
на слово.
Измерите API.
Укажите адрес API, модель и ключ. Мы отправим три задачи с проверяемым ответом, замерим скорость и соберём отчёт с экспресс-оценкой от 0 до 100. Результат сохранится по ссылке.
- Ключ не сохраняется
- Без регистрации
- Одна методика для всех API
Что вы получите
Отчёт, который
можно переслать команде.
- Оценка от 0 до 100 с версией расчётаИтог словами и формула по компонентам. Быстрая проверка получает отдельную экспресс-оценку.
- Ответ и время по каждой задачеКакие задачи решены и сколько ждать первого токена.
- Честные границы выводаЧто отчёт показывает и чего не утверждает — прямо в отчёте.
- Постоянная ссылкаОтправьте отчёт команде или провайдеру. Ключ в ссылку не попадает.
Как мы проверяем
Одна методика для всех API.
Одинаковые задачи
Фиксированные задачи с проверяемым ответом — одни и те же для всех провайдеров.
Время до первого токена
Сколько ждать, пока ответ начнёт появляться, и сколько длится весь ответ.
Отчёт по ссылке
Результат сохраняется по ссылке. Ключ и тексты ответов — нет.
Без рейтинга доверия
Оценка описывает один запуск, а не компанию. Общего рейтинга провайдеров нет.
Глубина проверки
Начните с трёх задач.
Решение принимайте по 27.
Быстрая проверка
Без регистрации3задачи
- Арифметика, код и точный JSON
- Время до первого токена по каждой задаче
- Экспресс-оценка по 3 задачам
- Публичный отчёт по ссылке
Три задачи методики capability-probes-v0. Полная проверка идёт по 27 задачам.
Запустить быструю ↑Подробная проверка
Для решения о покупке27+задач и 7 параметров API
- 5 категорий: логика, код, JSON, ограничения, длинный контекст
- 7 параметров API: max_tokens, stop, temperature, seed, logprobs, response_format, tools
- Надёжность: ошибки, таймауты и обрывы потока
- Сравнение с эталоном, когда он собран
- Личный отчёт после входа
Публичная база
Сохранённые проверки.
Записи добавляют пользователи. Адрес и ID модели указаны ими и не подтверждены нами.
Сортировка: сначала новые
Проверьте свой
API. Бесплатно.
Адрес, ключ и модель — остальное сделаем мы. Ключ используется только на время проверки и не сохраняется.