Из чего складывается оценка
Каждая метка — один пункт вашей оценки. Цвет показывает, к какому критерию он относится.
Веса всегда складываются в сотню. Если не складываются, такой набор критериев просто не попадает на сайт — это проверяется автоматически. Ниже — критерии для темы «Повседневный разговор». Здесь «переспросить, когда не понял» весит больше, чем словарный запас.
Момент, когда вы не поняли: вы сказали об этом или кивнули и понадеялись? Именно это решает, правильно ли вы примете заказ, а не размер словаря.
- Высшая оценка — формулировка, по которой её ставят
- Repaired without breaking the flow: confirmed back what was heard, flagged the exact gap, and the other person barely slowed down.
- Чем подтверждается
- Минимум 1 проверенная цитата из сказанного вами — иначе критерий останется без оценки
- Вес
- 30 из ста баллов здесь
Всего 100 пунктов, из них 70 приходится на другие критерии
Переспрашивать, когда не понял — 30 пунктов из 100
- Этот критерий
- Нераспределённые — всегда пусто
Чего мы не обещаем
Что оценка всё равно не скажет
Это число получилось из пяти проверок. Ни одна из них не отвечает ни на один из четырёх вопросов ниже. Страница, где перечислены только пять, продавала бы метод, а не объясняла его.
Мы доказываем, что вы это сказали, а не что это было верно
Проверка доказывает, что слова ваши. А удачным ли был ход — в том разговоре, в ту секунду — решила модель. Поэтому формулировки, по которым ставят оценки, опубликованы: с ними можно спорить.
Оценка — это не уровень языка
Сложность описывает разговор — «рассчитан на B1» — и никогда человека в нём. Здесь ничто не сертифицирует ваш уровень языка. Продукт, который бы это пообещал, сделал бы ровно то непроверяемое заявление, ради замены которого и написана эта страница.
Три проверки — это ещё не уверенность
Один и тот же разговор оценивается трижды, берётся средний результат. Это устойчивее, чем один раз, и всё равно это модель, читающая текст. Мы отдельно измеряем, насколько результат гуляет сам по себе, и меньше этого разброса ничего не рисуем как прогресс. Это честная форма фразы «мы не знаем».
И ничто из этого не предсказывает сам день
Ни вашу оценку на экзамене, ни решение по визе, ни то, сделают ли вам оффер. Мы репетируем двенадцать минут и возвращаем свидетельство ровно об этих двенадцати минутах. Остальное зависит от того, чего эта программа не видит.
После оценки
Оценку можно проверить и через месяц после разговора
Когда начинается разговор, мы записываем пять вещей: собеседника, ситуацию, критерии, версию системы оценки и точную версию модели. Поэтому любую оценку можно повторить и получить то же самое. Ниже — что будет, если что-то из этих пяти изменится.
Если меняются критерии
Старые оценки пересчитываются, прежде чем вы их увидите
Разговор навсегда сохраняет те критерии, по которым его оценили. Поэтому изменение задним числом не может втихую сдвинуть число, которое вы уже прочитали. Если критерии поменялись, история сначала пересчитывается и только потом рисуется. Оценки из разных версий никогда не соединяются одной линией на графике.
Если меняется система оценки
Она не включится, пока не сойдётся с людьми
Прежде чем новая версия оценки включится, она разбирает разговоры, которые уже оценили живые люди. Её результаты сравнивают с их результатами. Пока не совпадёт — она не работает. Это правило записано в самой базе, а не в регламенте. Только такое правило переживает дедлайн.
Когда вы попросите
Мы объясняем любую оценку письменно
Попросите — и получите письменное объяснение любой автоматической оценки: по каким критериям её поставили, какая версия системы это сделала и на каких именно ваших фразах она держится. Всё это и так видно на самой оценке. Здесь — ваше право запросить это отдельно, и оно записано в политике приватности, а не в шаблоне ответа поддержки.
Откуда берутся факты
Оценка собирается из трёх вещей. Только одна из них — чьё-то мнение.
Две из трёх — это простая арифметика по тому, что вы сказали. Третья — критерии, и они опубликованы до того, как вы заговорите. То есть единственное мнение здесь можно прочитать заранее и оспорить потом.
Ваши собственные слова
Под каждой строкой разбора
- Прежде чем вы увидите фразу, сервер сверяет её слово в слово с записью вашего разговора.
- Фраза, которая не совпала, проверяется ещё раз и затем отбрасывается. Мы считаем, как часто это бывает.
- Так модель не сможет пересказать вас своими словами, чтобы вы с ней согласились.
Часы
Арифметика, а не мнение
- Сколько вы говорили, какие были паузы перед ответом, сколько слов-паразитов, как часто вас перебивали.
- Это считает код, поэтому результат повторяется до миллисекунды.
- Приходит через секунду после конца разговора — раньше, чем оценка.
Критерии оценки
Опубликованы до того, как вы заговорите
- Сами критерии, вес каждого в процентах и что означает каждая оценка.
- Критерий, который нечем подтвердить, остаётся без оценки, а не получает вежливую троечку.
- Итог считает код. У модели его никогда не спрашивают.
Обжалование
Считаете, что оценка неверная? Человек прочитает её в течение 4 часов
У каждого разговора есть кнопка «пожаловаться», у каждой оценки — ссылка «оспорить». Вот что будет дальше.
Если дело в деньгах
Сначала деньги, потом спор
Если с вас списали за разговор, которого не было, мы исправим это до того, как кто-то начнёт обсуждать оценку. Мы добавляем исправляющую запись, а не переписываем старую, — чтобы арифметика сходилась. Ваш баланс всегда был суммой этих записей.
Что помогает
- Какой разговор и какой критерий
- Фраза, которую, по-вашему, поняли неверно
- Какая оценка, по-вашему, должна быть
Вы показываете, какая оценка
В любое время
Кнопка есть под каждым критерием в каждой оценке. Двух предложений достаточно. Разговор, из которого она взялась, прикрепится сам.
Её читает человек
В течение 4 часов
С записью вашего разговора и всеми тремя проверками перед глазами. Без шаблонных ответов и без того, чтобы модель проверяла сама себя.
Минуты возвращаются
В тот же час
Если минуты списали за разговор, которого не было, они вернутся до того, как начнётся спор об оценке. Это два разных вопроса.
Вы получаете ответ
В течение 2 рабочих дней
Письменно: что проверили и что изменилось. Новая оценка добавляется рядом со старой, а не затирает её, — чтобы историю было видно.
FAQ
Шесть вопросов, которые обычно прячут в мелкий шрифт
Поговорить с человеком
Машины здесь — только сами собеседники. Всё остальное — люди, и обычно мы отвечаем в течение 2 часов.
Написать нам