Правила TCM/Time
Проверка представленных решений проводится во время соревнований. Участники по мере готовности отправляют свои решения в тестирующую систему с помощью предоставленного программного обеспечения. При отправке решения участник выбирает, какой компилятор будет использован тестирующей системой, работающей под Linux. Информация о настройках компиляторов и конфигурации проверяющих серверов размещена в разделе Настройки компиляторов.
Каждое решение проверяется системными тестами, скрытыми от участников. Решение засчитывается в том случае, если проходит все тесты. Тестирование производится автоматически, поэтому решения участников должны в точности придерживаться форматов входных и выходных файлов, описанных в условии каждой задачи. Если иное не оговорено отдельно, все входные данные при проверке решений предполагаются корректными и удовлетворяющими всем ограничениям, указанным в условии задачи.
Максимальное время прохождения теста указано в условии каждой задачи. Если этот лимит превышен, решение считается неверным.
Участник может отправлять решения на проверку «в открытую» или «втёмную». Для каждой задачи выбрать способ отправки решения можно только один раз. Результаты проверки решения доступны участнику сразу же.
При отправке решения «в открытую», оно сразу же проверяется полным набором системных тестов, после чего участнику сообщается, зачтено решение или нет. Если оно не зачитывается, участнику передается тип ошибки и номер теста, на котором она произошла.
При отправке решения «втёмную», оно сначала проверяется промежуточным набором тестов, перечисленных в условиях каждой задачи. Если решение не проходит их, участнику сообщается тип ошибки и номер теста, на котором она произошла. Если решение проходит промежуточный набор тестов, оно засчитывается условно. После этого изменить решение и повторно отправить его на проверку невозможно. После турнира условно засчитанные решения проверяются полным набором системных тестов, и только после этого становится известен окончательный результат.
Перечень возможных ошибок
| Сообщение | Сообщается ли номер теста? | При сдаче «в открытую» | При сдаче «втёмную» | Возможная причина |
|---|---|---|---|---|
| OK | Нет | Решение зачтено | Решение прошло все промежуточные тесты | Программа верно работает на соответствующем наборе тестов |
| Compilation error | Нет | Компиляция программы завершилась с ошибкой | Компиляция программы завершилась с ошибкой | |
| Wrong answer | Да | Ответ неверен | Ответ на один из промежуточных тестов неверен | 1. ошибка в программе 2. неверный алгоритм |
| Presentation error | Да | Тестирующая система не может проверить выходные данные, так как их формат не соответствует описанному в условиях задачи | Тестирующая система не может проверить выходные данные на одном из промежуточных тестов, так как их формат не соответствует описанному в условиях задачи | 1. неверный формат вывода 2. программа не печатает результат 3. лишний вывод |
| Time-limit exceeded | Да | Программа превысила установленный лимит времени | Программа превысила установленный в условии лимит времени на одном из промежуточных тестов | 1. ошибка в программе 2. неэффективное решение |
| Memory limit exceeded | Да | Программа превысила установленный в условиях лимит памяти | Программа превысила установленный в условиях лимит памяти на одном из промежуточных тестов | 1. ошибка в программе (например, бесконечная рекурсия) 2. неэффективное решение |
| Run-time error | Да | Программа завершила работу с ненулевым кодом возврата | Программа завершила работу с ненулевым кодом возврата на одном из промежуточных тестов | 1. ошибка выполнения 2. программа на C или C++ не завершается оператором return 0 3. ненулевой код возврата указан явно |
При возникновении ошибки «Compilation error» присланное решение не будет проверяться ни на одном из тестов, а участнику сразу будет сообщено об ошибке компиляции. Такая попытка не будет учитываться при последующем вычислении штрафа. При возникновении ошибок «Run-time error», «Memory limit exceeded» и «Time-limit exceeded» вывод программы не проверяется.
Отправленные подряд решения с идентичным исходным кодом от одного и того же участника игнорируются. Если решение отправлено «втёмную» и признано неправильным на промежуточных тестах, оно не учитывается при последующем вычислении штрафа.
Промежуточные тесты следуют в том же порядке, что и в условиях задачи.
Подсчёт промежуточных и окончательных результатов
Участники ранжируются по количеству принятых решений. Участники, решившие одинаковое количество задач, ранжируются по суммарному времени решения.
Суммарное время решения определяется как сумма времени решения и бонусов за сдачу «втёмную» для каждой принятой задачи.
При сдаче «в открытую», время решения задачи считается в секундах от начала соревнования до момента отправки правильного решения, плюс 20 штрафных минут за каждое непринятое решение.
При сдаче «втёмную», из времени решения вычитается n секунд, где n равно (количество не решивших × продолжительность турнира в секундах) ÷ количество участников.
Задачи, не признанные решёнными к моменту окончания соревнования, не учитываются при расчёте суммарного времени. Штрафные минуты за них также не начисляются.
В таблице текущих результатов правильные решения, отправленные «в открытую», обозначены знаком «плюс», после которого следует количество забракованных решений. Если задача сдана с третьей попытки, то в таблице будет стоять +2, а сданная сразу задача будет отмечена как +. Непринятые задачи обозначаются знаком «минус», после которого следует количество попыток.
Решения, отправленные «втёмную» и прошедшие промежуточные тесты, обозначаются в таблице знаком вопроса и учитываются при расчете текущего положения участников как правильные.
По завершении турнира проходит проверка отправленных «втёмную» решений полным набором системных тестов.
В таблице итоговых результатов те из них, что прошли системные тесты, обозначаются как ✔, а не прошедшие — как ✗.