МЕТОДИКА / РУССКИЙ · ВЕРСИЯ 2.0
Как мы проверяем релей
Семь проверок на четырёх протоколах, каждая сводится к PASS, WATCH, FAIL или SKIP. Каждый вердикт указывает на доказательство. Китайская страница — источник истины.
Что означает публичный класс
A/B/C описывает доступность за 7-дневное окно: A — не менее 99% и 5 с средней задержки; B — 97% и 6,5 с; C — всё остальное. Класс не является оценкой подлинности, биллинга или безопасности. Провалы детекции пока не входят в публичный класс.
Семь проверок
- Идентичность модели — пять одинаковых китайских проб; соотношение токенов должно оставаться в полосе семейства и кластеризоваться с допуском 8%.
- Биллинг — usage × официальная цена против возвращённой стоимости; более 15% — WATCH, более 50% — FAIL, нет официальной цены — SKIP.
- Игла контекста — короткий контроль и игла примерно на 22,5% заявленного контекста (не более 60K символов).
- Семантика ошибок — несуществующая модель должна вернуть 4xx в официальной форме OpenAI, Anthropic или Gemini.
- Параметры — при max_tokens=16 completion должен действительно обрезаться.
- Инструменты — принудительный вызов должен вернуться как стандартный tool_calls или function_call. В v1 только протоколы OpenAI.
- Стриминг — SSE должен приходить несколькими блоками с измеримым первым токеном. В v1 OpenAI Chat и Anthropic.
Протоколы
OpenAI Chat (/chat/completions), OpenAI Responses (/responses), Anthropic Messages (/v1/messages) и Gemini (/v1beta/models/{model}:generateContent). Покрытие различается: инструменты пропускаются в Anthropic и Gemini; стриминг пропускается в Responses и Gemini. Страница детекции показывает пропущенные проверки, а не считает их пройденными.
Оценка и выборка
Оценка доступности: 0,75 × доступность + 0,25 × max(0, 100 − задержка × 8). Она упорядочивает сайты только внутри одного окна. Сайт с 500 пробами и сайт с 2 000 имеют разную уверенность; ниже 200 проб мы говорим «наблюдать», а не «рекомендуем».
Границы
- Мы не проверяем владение, хранение средств, соответствие требованиям к данным и лицензии.
- Один запуск — точечная проверка, а не мониторинг 24/7. Результаты меняются в зависимости от времени суток.
- «Ничего не найдено» не означает «безопасно»; «найдено нарушение» не означает «мошенничество».
- Детекция расходует токены ключа, который вы предоставили. Ключ не сохраняется; остаются только последние шесть символов как отпечаток.