Guides
Как оценивать проекты в эпоху ИИ и вайбкодинга
Как настроить критерии, когда за выходные один человек собирает то, что раньше делала команда, и как отличить продукт от обёртки.
Старые критерии оценки ломаются об ИИ. Когда команда за вечер собирает с Cursor то, на что раньше уходили все выходные, оценивать объём кода бессмысленно, а привычные шкалы начинают награждать не тех. Разберём, как судить хакатон, где вайбкодят все.
Что перестало работать
Оценка по количеству сделанного больше не отражает ни усилий, ни умений. Один человек с ИИ выдаёт объём целой команды, а красивая обёртка над чат-моделью выглядит на демо не хуже продуманного продукта. Если оставить старую шкалу, вы наградите тех, кто быстрее всех сгенерировал правдоподобную картинку, а не тех, кто действительно что-то построил.
На что смещать вес
- Работоспособность. Не «выглядит готовым», а работает на живом примере, который выбрал не участник, а жюри.
- Глубина за обёрткой. Есть ли своя задача, свои данные и логика, или это интерфейс поверх чужой модели.
- Понимание. Команда объясняет, как устроена ключевая часть, а не кивает на ИИ.
- Польза и оригинальность подхода, а не факт использования ИИ как таковой.
Полезный приём на защите: попросите команду объяснить кусок их же кода или показать проект на новом примере. Это за минуту отделяет тех, кто строил, от тех, кто только жал кнопку.
Запрещать ИИ бессмысленно
Запрет непроверяем, участники всё равно пользуются ИИ, просто тише. Разумнее не запрещать, а выравнивать доступ и спрашивать за результат. Если раздать всем командам одинаковый доступ к нужным моделям, никто не проиграет из-за пустого лимита, и оценка становится честнее. На Stavleak организаторы раздают участникам ключи к API спонсоров через кабинет, а жюри выставляет баллы по заданным вами критериям с отдельного входа, так что шкалу под ИИ-эпоху вы настраиваете сами.
Пропишите правила заранее
Что бы вы ни решили, скажите это участникам до старта: можно ли использовать ИИ, надо ли раскрывать, что сгенерировано, оценивается ли понимание кода. Прозрачные правила снимают половину споров на награждении.
Общий разбор критериев без привязки к ИИ у нас есть отдельно, а собрать оценку под свои правила можно на демо Stavleak.