Проверить API

Распределения ответов · протокол categorical-v1

Как API
выбирают ответы.

Один и тот же набор коротких вопросов с фиксированными вариантами уходит в эталонный и проверяемый API. AuditLLM сравнивает частоты ответов: JSD по каждой ячейке и перестановочный тест по выборке целиком.

Отпечаток не доказывает подмену и не называет модель. Расхождение распределений — повод повторить проверку, совпадение не подтверждает идентичность: эталон вы предоставляете сами, и его происхождение не проверяется.

Порядок работы

Три шага

Собрать эталон

Эталонный API получает короткие вопросы и возвращает один вариант из фиксированного набора. Сохраняются частоты вариантов и задержка, а не тексты ответов.

Сравнить проверяемый API

Тот же набор вопросов уходит в проверяемый API. Число запросов совпадает с эталоном, поэтому частоты сравнимы.

Прочитать измерения

JSD показывает, насколько разошлись частоты, перестановочный тест — вероятность такого расхождения при одинаковых распределениях. Вывод ограничен размером выборки.

01 · ЭталонПротокол categorical-v1

Собрать профиль ответов

Профиль — это частоты вариантов по четырём типам вопросов: число, цвет, буква, фигура. Ключ нужен только на время сбора.

HTTPS, адрес заканчивается на /v1 или /v1/openai.

Ключ используется только на время проверки и не сохраняется.

Эталонный API получит 100 запросов. Возможна плата по тарифу провайдера.

02 · Проверяемый APIПротокол categorical-v1

Сравнить с сохранённым эталоном

Вставьте ID эталона и подключение проверяемого API. Число запросов совпадёт с эталоном — без этого частоты несравнимы.

Вставьте ID эталона, чтобы увидеть модель и число запросов до запуска.

HTTPS, адрес заканчивается на /v1 или /v1/openai.

Ключ используется только на время проверки и не сохраняется.

Публичный архив

Сохранённые сравнения

История на этом сервере публична. Адреса и ID моделей внесены пользователями и не удостоверены AuditLLM. Тексты ответов и ключи не сохраняются.

Эталоны

Сохранённые профили

Профиль эталона хранится на сервере под своим ID. Чтобы вернуться к нему позже, сохраните ID: списка профилей у сервера пока нет.