🜂 Как оценивается работа
(Испытание Сложностью · Первый сезон)
Испытание сложностью — это не экзамен и не конкурс работ. Это практическая проверка способности удерживать, проектировать и реализовывать сложные системы во времени.
Мы не проверяем:
- знания и прошлый опыт,
- должности и резюме,
- стек инструментов.
Мы смотрим на то, как ты мыслишь, принимаешь решения и собираешь целое — будь ты инженер, продюсер, архитектор или системный коммуникатор.
Оценка построена так, чтобы:
- не поощрять формальные решения,
- не наказывать за ошибки,
- и не подменять реальность баллами.
Общие принципы оценки
- Оценивается работа и результат, а не личность участника
- Оценивается поведение системы, а не количество функций
- Решения принимают живые люди, не алгоритмы
- Искусственный интеллект не выносит вердиктов
Оценка — это не ярлык и не рейтинг. Это инструмент навигации по траектории, а не соревнование.
Кто оценивает
Оценку проводят операторы и команда испытания (люди, которые умеют держать сложность и видеть архитектуру).
Важно:
- оценка не автоматизирована;
- ИИ не участвует в вынесении решений;
- при сомнениях учитывается проверяемость результата и совпадение замысла с реализацией.
Универсальность критериев (важно)
Критерии оценки одинаковы для всех ролей.
Они применимы к:
- инженерным решениям,
- продюсерским и продуктовым архитектурам,
- коммуникационным и сценарным системам.
Если ты не инженер:
- сущность — это продукт, программа, сервис или процесс;
- состояния — это фазы, режимы, контексты;
- логика — это правила, ограничения и решения;
- исполняемость — это способность системы жить без постоянного ручного контроля.
Мы не ожидаем кода от всех. Но мы ожидаем архитектурного удержания целого.
Структура испытания
Испытание проходит в два раунда.
Каждый раунд проверяет разный уровень зрелости и имеет собственный формат оценки.
🜁 Раунд 1 — Архитектура и мышление
(Формализованная оценка результата)
В первом раунде ты выполняешь базовое задание: создание исполняемой темпоральной сущности в Metabot Runtime.
Что мы проверяем в первом раунде
Мы не проверяем:
- знание платформы Metabot,
- скорость изучения документации,
- прошлый опыт или профессию,
- стиль кода и “best practices”.
Мы проверяем способ мышления и способность удерживать сложность:
- удержание сложности во времени
- понимание исполняемой сущности
- осознанную работу со средой
- наличие детерминированной логики (интеллект без ИИ)
Критерии оценки Раунда 1
🔹 Критерий 1. Исполняемость во времени
(Коммутация · Runtime) — 0–5 баллов
Проверяется, является ли результат живущей сущностью, а не одноразовым сценарием.
Оценивается:
- переживает ли система паузы и возвраты;
- сохраняет ли целостность во времени;
- встроено ли время в архитектуру решения.
Для продюсеров и лидеров: это про то, способен ли твой замысел жить и развиваться без постоянного ручного управления.
Шкала 0–5:
- 0 — одноразовый скрипт / разовая реакция: «сработало и умерло»
- 1–2 — есть видимость жизни (несколько шагов), но по сути сценарий; паузы/повторы ломают логику
- 3–4 — сущность реально живёт во времени; повторные входы и паузы выдерживаются
- 5 — время встроено в архитектуру; поведение явно зависит от «когда» и «сколько прошло»
🔹 Критерий 2. Состояние и идентичность
(Коммутация · Runtime) — 0–5 баллов
Проверяется, есть ли у сущности память и идентичность.
Оценивается:
- наличие состояния;
- изменение состояния со временем;
- влияние состояния на дальнейшее поведение.
Для не-инженеров: состояние — это контекст, в котором система принимает разные решения, а не переменная.
Шкала 0–5:
- 0 — состояния нет
- 1–2 — состояние есть формально (флаги/переменные), но почти не влияет на поведение
- 3–4 — состояние реально влияет на решения и переходы; видно, что сущность «помнит»
- 5 — состояние определяет поведение и траекторию; у сущности читается идентичность и история
🔹 Критерий 3. Работа с событиями и средой
(Коммутация ↔ Коммуникация) — 0–5 баллов
Проверяется, встроена ли сущность в среду.
Оценивается:
- реакция на события (сообщения, таймеры, триггеры);
- корректная обработка внешних воздействий;
- способность ожидать и реагировать асинхронно.
Шкала 0–5:
- 0 — «событие» сведено к кнопке/одному входу, среда не учитывается
- 1–2 — есть примитивная реакция на сообщения, но без событийной модели и без устойчивости к внешним воздействиям
- 3–4 — осознанная событийная модель: несколько типов событий/входов, корректные реакции, ожидания
- 5 — сущность живёт внутри среды: события, ожидания, внешние воздействия — часть её «жизни», а не декорация
🔹 Критерий 4. Интеллектуальный слой (без ИИ)
(Интеллект · Deterministic Logic) — 0–5 баллов
Проверяется наличие осознанной логики принятия решений.
Оценивается:
- правила, условия, переходы;
- причинно-следственные связи;
- влияние логики на траекторию сущности.
⚠️ Важно: в первом раунде искусственный интеллект запрещён. Допускается только детерминированная логика: правила, условия, бизнес-логика, классы, состояния.
Для продюсеров: логика — это правила игры, а не алгоритмы. Мы смотрим, понимаешь ли ты, почему система действует так, а не иначе.
Шкала 0–5:
- 0 — логики нет (просто ответы/переходы без решения)
- 1–2 — примитивные if/else без модели; логика поверхностная и не управляет жизнью сущности
- 3–4 — осознанная бизнес-/поведенческая логика; видны правила, причины, выбор траектории
- 5 — логика встроена в сущность и определяет траекторию; решения являются ядром поведения
🔹 Критерий 5. Архитектурная осознанность
(Meta-уровень) — 0–5 баллов
Проверяется, понимаешь ли ты, что именно ты построил.
Оценивается:
- краткое описание сущности;
- совпадение описания с реализацией;
- отсутствие «магического мышления».
Шкала 0–5:
- 0 — «ну оно как-то работает», объяснения нет
- 1–2 — объяснение постфактум; слова не совпадают с реализацией
- 3–4 — ясная архитектурная логика; описание соответствует тому, что сделано
- 5 — ты мыслишь категориями сущностей, состояния, событий, траекторий; объяснение точное и проверяемое
🔹 Критерий 6. Интегральная зрелость
(Общее впечатление) — 0–2 балла
Суммарная оценка целостности решения и готовности идти дальше.
Шкала 0–2:
- 0 — сыро, несобрано, непроверяемо, «не держит форму»
- 1 — рабочее решение, но есть явные слабые места/дырки
- 2 — цельно, аккуратно, проверяемо, видно «готов идти дальше»
Итоговая оценка Раунда 1
Максимум: 27 баллов
Рекомендованные пороги:
- 0–10 — испытание не пройдено
- 11–16 — частичное прохождение (возможен повтор)
- 17–22 — испытание пройдено
- 23–27 — Excellent / С отличием
По результатам первого раунда фиксируется статус:
- Не пройдено
- Пройдено
- Пройдено с отличием (Excellent)
🜂 Раунд 2 — Индивидуальная калибровка
(Ответственность, ремесло, глубина)
Во втором раунде задания индивидуальны и формируются на основе твоей траектории в первом раунде.
Формат задания может быть любым:
- инженерным,
- продуктовым,
- сценарным,
- аналитическим,
- коммуникационным,
- организационным.
Зачем нужен второй раунд
Раунд 1 показывает тип мышления и способность держать сложность. Раунд 2 показывает ремесло, глубину и ответственность в твоей роли.
Здесь мы уже можем смотреть (если это релевантно твоему треку):
- качество реализации и инженерную культуру;
- архитектуру кода;
- работу с БД и интеграциями;
- аккуратность, читаемость, устойчивость;
- способность доводить до результата и работать с обратной связью.
Как оценивается второй раунд
Во втором раунде не используется публичная детальная шкала, потому что задания индивидуальны. Итог фиксируется простой шкалой результата:
- 0 — Not Passed / Не пройдено
- 1 — Passed / Пройдено
- 2 — Passed with Distinction / Пройдено с отличием
Оценивается:
- выполнение задания;
- работа с обратной связью;
- доведение до результата;
- способность действовать в неопределённой ситуации.
Подробные внутренние критерии оценки не публикуются. Решение принимается операторами и командой испытания.
Важные ограничения
- Испытание не гарантирует трудоустройство или доход
- Прохождение испытания — это допуск, а не обязательство
- Деньги и партнёрство — это возможность, а не обещание
За 2–4 недели ты:
- не «получишь профессию»,
- но получишь реальный опыт работы в новой парадигме и поймёшь, подходит ли тебе этот путь.
Заключение
Испытание сложностью — это не фильтр «хороших» и «плохих». Это способ увидеть себя в действии и принять осознанное решение.
Если путь твой — ты продолжишь. Если нет — ты уйдёшь без поражения.
Поле держится не принуждением, а осознанным присутствием тех, кто решил его держать.
