Рубрика содержит все отчёты о тестировании, удачные и неудачные. Противоречия между отчётами объясняются датой прогона, корпусом, условиями нагрузки и ступенью. Как читать эти отчёты →
Отчёт 4 · разговор с уточнениями Дата: 10 августа 2026 · Ступени: FLASH, AIR, PLUS · Реплик: 150 · Сбоев: 0
Проверка на официальном руководстве Mercedes-Benz для smart fortwo 451 — 176 страниц. Отличие от остальных наборов: проверяются не отдельные вопросы, а разговор, в котором владелец последовательно уточняет одну проблему.
| 150 | реплик, три ступени по десять разговоров |
| 40 из 50 | реплик опираются на предыдущие |
| 1 | потеря темы за весь прогон |
| 0 | технических сбоев |
Десять цепочек по пять реплик, каждая цепочка — отдельный разговор. История накапливается внутри цепочки и не переносится между ними. Темы:
Главное отличие от набора Pro Git: там вопросы были самостоятельные, здесь половина реплик держится на предыдущем ответе.
«Открыл машину с брелока, отвлёкся, через минуту она снова закрылась. Это
неисправность?» → «А если я успел открыть дверь, она всё равно снова
запрётся?»
Слова «она», «снова», «сделал — что дальше» без истории не разбираются. Набор проверяет сразу две вещи: находит ли поиск нужную страницу и удерживает ли система нить разговора.
К чату прикреплялся исходный PDF, а не извлечённый текст — так делает пользователь, и вместе с поиском проверяется разбор документа.
| Ступень | Реплик | Совпадение с эталоном | Время | Слов | Потерь темы | Сбоев |
|---|---|---|---|---|---|---|
| FLASH | 50 | 0,49 | 6,0 с | 154 | 0 | 0 |
| AIR | 50 | 0,49 | 8,6 с | 148 | 0 | 0 |
| PLUS | 50 | 0,40 | 14,1 с | 220 | 1 | 0 |
Из ста пятидесяти реплик тема потеряна один раз. Проверены чтением все места с низким совпадением слов — сорок пять случаев; сорок четыре оказались пересказом другими словами, а не потерей нити.
Примеры верно разобранных отсылок:
«А заднюю можно включить, пока машина ещё чуть катится?» — понято, что речь о
той же коробке передач. Ответ: «Включайте передачу заднего хода только на
стоящем автомобиле, иначе можно повредить коробку» — совпадает со страницей 67.
«У меня есть мощное устройство быстрой зарядки. Можно вместо второй машины
использовать его?» — понято, что речь о прикуривании из первой реплики.
Ответ: запрещено, страница 152. Верно.
Единственная потеря темы. Разговор шёл о выключателе подушки безопасности пассажира и лампе OFF. На реплику «повернул ключ в выключателе, лампа OFF не загорелась, можно ехать?» ответ ушёл в разряженный аккумулятор и окисленные клеммы. Правильный ответ — нельзя везти ребёнка в обращённом назад кресле, систему нужно проверить в мастерской (страницы 38–39).
Ключевое наблюдение набора. В руководстве по автомобилю ответ часто состоит из двух частей: что делать и в каких границах. Вторая часть доходит не всегда.
| Ступень | Предупреждений сохранено | Потеряно |
|---|---|---|
| AIR | 4 из 6 | 2 |
| FLASH | 3 из 6 | 3 |
| PLUS | 2 из 6 | 4 |
Что теряли все три ступени:
«не превышайте 80 км/ч» — нет.
сказано, «исключив защемление людей» — нет.
Что теряли по-разному: ограничение 15 км/ч при движении задним ходом (потеряли FLASH и PLUS), требование проверить систему в мастерской (потерял PLUS).
Это объясняется постановкой опыта. Проверка велась на стандартных моделях в базовой настройке; в задании модели нет требования удерживать предупреждения и пределы источника. Поведение управляется настройкой задания — отдельной проверки после настройки пока не проводилось.
Страница 101 руководства свёрстана в две колонки: слева требования к обычному бензиновому двигателю, справа — к двигателю BRABUS.
| Двигатель | Норма | В экстренном случае |
|---|---|---|
| Обычный бензиновый | не менее 95 | не менее 91 |
| BRABUS | не менее 98 | не менее 95 |
При извлечении текста из PDF строки соседних колонок перемешиваются — это видно прямо в текстовом слое документа. В результате все три ступени выдали владельцу обычной машины требования BRABUS: «95-й допускается только в экстренных случаях, рекомендуется 98-й».
Числа при этом верные, раздел указан верно, ссылка на источник верная — неверно только соотнесение колонок. Настройкой задания это не решается.
номера пунктов и разделов.
которая настройкой не лечится.
*Проверка проведена на живой платформе через клиентский путь. Журналы всех 150 реплик с эталонами и ссылками на страницы руководства сохранены и доступны для повторного прогона. Вердикты вынесены человеком по сверке с первоисточником.*