Экспертное заключение по учебно-методическому комплексу «Радио своими руками»
Экспертное заключение
Объект экспертизы: учебно-методический комплекс (УМК) «Радио своими руками» — пять проектных модулей на платформе E77-900MBL / STM32WLE5.
Основание сравнения: каталог Pedagogics/ (эталонный модуль педагогического дизайна: ADDIE, Backward Design, таксономия Блума—Андерсона, пирамида Миллера, SSDL, Такман, учебная аналитика, когнитивная наука).
Дата экспертизы: 26 июля 2026 г.
1. Резюме для лица, принимающего решение
Разрыв между двумя половинами УМК — главный риск. По содержанию вы готовы к чемпионатам; по оформлению результата — нет, а именно оформление и оценивается в конкурсных процедурах.
| Измерение | Оценка | Комментарий |
|---|---|---|
| Инженерная глубина и достоверность | 9 / 10 | Редкое качество: честные ограничения, история отладки, реальные грабли |
| Межпредметность (физика/матем./информ./статистика) | 9 / 10 | Явно прописана в каждом модуле, таблицы переноса в индустрию |
| Актуальность содержания (2026) | 8 / 10 | LPWAN, ROC, spoofing, systematic bias — живые темы; пробелы см. §4 |
Соответствие эталону педдизайна (Pedagogics/) | 3 / 10 | Проектирование «от контента», см. §3 — критический дефицит |
| Готовность к олимпиадам/чемпионатам | 5 / 10 | Содержание есть, конкурсной упаковки нет — см. §5 |
| Безопасность и нормативная рамка | 4 / 10 | ТБ фрагментарна, ФГОС/СанПиН не упомянуты — см. §4.3 |
Интегральная оценка: 6,3 / 10 — «содержательно сильный сырой материал, не доведённый до состояния программы».
2. Оценка модулей по отдельности
2.1. Сводная таблица
| Модуль | Инженерия | Дидактика | Оцен. средства | Олимп. потенциал | Итог |
|---|---|---|---|---|---|
| FoxHunter (охота на лис) | 9 | 7 | 3 | 8 | 6,8 |
| BeaconRadio (SOS-маячок) | 9 | 6 | 2 | 9 | 6,5 |
| PowerSentry (ЖКХ-сеть) | 9 | 6 | 3 | 9 | 6,8 |
| WarWalk (картограф покрытия) | 9 | 6 | 2 | 8 | 6,3 |
| RFCurtain (радиозанавес) | 8 | 8 | 5 | 7 | 7,0 |
2.2. Разбор
FoxHunter — методически лучший по структуре. Единственный модуль с отдельным METODIKA.md, где выстроена жёсткая последовательность «сначала найти руками — потом лезть внутрь». Это интуитивно верная реализация принципа конкретного опыта Колба и заслуживает похвалы. Дидактическая находка урока 5 (один механизм fcnt различает «честный ребут» и «replay-атаку») — материал уровня вузовского курса защиты информации, поданный школьнику. Дефект: урок 3 «брутфорс» даёт ребёнку работающий инструмент подбора подписи; предупреждение «только на своём железе» есть, но правовой рамки (ст. 272–274 УК РФ) и подписи о правилах — нет.
BeaconRadio — сильнейшая фабула, слабейшее оценивание. Легенда (маячок для человека с деменцией) задаёт подлинную аутентичную задачу в терминах главы 3 эталона — это редкость. Урок 7 (цена ошибки I/II рода, ROC) — методологическая вершина всего УМК: ребёнок осознаёт, что порог задаёт не программист, а сценарий применения. Дефект: два врайтапа (beacon_project_writeup.md, Beacon_v3_step2_GPS_writeup.md) — это инженерный журнал, а не учебный материал; они содержат «промты для нового чата», backlog и пароли-заметки. Для передачи другому педагогу их надо разделить: инженерная часть — в приложение, учебная — в урок.
PowerSentry — лучший по «взрослости» задачи. Переход от одного микроампера к городскому бюджету — образцовая демонстрация масштабирования инженерного мышления. Урок 8 (защита проекта с четырьмя опорами: энергобюджет, ёмкость, безопасность, экономика) фактически описывает структуру конкурсной защиты. Дефект: экономическое обоснование даётся качественно («крупная скрытая статья ЖКХ») без единой цифры и источника. Для чемпионатного уровня нужны конкретные данные по потерям воды с ссылкой, иначе жюри снимет баллы за бездоказательность.
WarWalk — лучший по работе с данными. Уроки 5 и 7 (цензурированные данные, ошибка выжившего, ловушка heatmap) — это полноценное введение в культуру честной визуализации, которого нет в большинстве вузовских курсов. Дефект: полностью отсутствует ТБ полевого выхода — дети идут по городу с оборудованием, а в материалах ни слова о сопровождении, маршрутном листе, согласии родителей.
RFCurtain — лучший по оценочным средствам. Единственный модуль, где есть настоящий измерительный инструмент: турнирная таблица «пороги → попадания/пропуски/ложные» со счётом «попадания минус двойной штраф за ложные». Это де-факто рубрика. Программа_курса.md — самый близкий к методическому документу текст в УМК: в нём есть сквозная прогрессия понятий (таблица «рождается → закрепляется → инструмент»), правила ведущего, раздел «чего в курсе сознательно НЕТ». Замечание: этот документ лежит в каталоге одного модуля, хотя описывает весь курс — его место на верхнем уровне.
3. Критические расхождения с дорожной картой педагога
Ниже — расхождения, ранжированные по тяжести. Каждое сопоставлено с главой эталонного модуля.
3.1. Проектирование «от контента» — нарушение главы 1 и 2
07-pasport-pedagoga.md: «если вы можете назвать темы курса, но не можете назвать аутентичную задачу и измеримые цели — вы проектируете от контента».Материалы проходят эту проверку наполовину. Аутентичные задачи есть и они превосходны (найти человека с деменцией, спасти город от протечек, поймать нарушителя периметра). Но измеримых целей нет ни одной. Структура каждого урока — «Тема → Ход работы → Разбор → Практическое задание». Отсутствует верхний элемент: «Ученик умеет…».
Формулировка «Тема: логарифмическая шкала (дБм), затухание сигнала с расстоянием» — это список тем, прямо названный в главе 3 типичной ошибкой. Backward Design требует обратной последовательности: результат → доказательство → активность. В УМК последовательность прямая: активность → разбор → задание.
3.2. Отсутствие таксономической разметки — нарушение главы 3
Ни в одном из 34 уроков не указан уровень по Блуму—Андерсону или Миллеру. Практическое следствие — рассогласование уровня цели и уровня задания, которое эталон называет главным дефектом оценивания. Примеры из материалов:
| Урок | Фактический уровень деятельности | Уровень проверки | Разрыв |
|---|---|---|---|
| WarWalk, урок 5 (ошибка выжившего) | анализировать / оценивать | «придумайте бытовой пример» — понимать | есть |
| PowerSentry, урок 8 (защита сети) | создавать | защита 5 мин без критериев | не измерено |
| BeaconRadio, урок 1 (статус-байт) | применять | «соберите на бумаге, должно получиться 0x69» | нет — корректно |
| FoxHunter, урок 6 (брутфорс) | анализировать | расчёт времени перебора — применять | есть |
3.3. Оценивание не спроектировано — нарушение глав 3 и 5
Заявленный в Программа_курса.md принцип «оценивание без оценок, критерий — воспроизводимость» методологически грамотен и его следует сохранить. Но он не операционализирован: нет ни одной рубрики, по которой два разных педагога поставят одинаковый результат. Judgment-based оценивание без рубрики — это, по главе 3, непрозрачное и невоспроизводимое суждение.
Отсутствуют полностью: входная диагностика, промежуточные контрольные точки, инструмент анализа «топ-30% / боттом-30%», лист наблюдений. Глава 5 эталона («Данные в помощь преподавателю») в УМК не реализована ни в одном пункте.
3.4. Групповая динамика и мотивация не учтены — нарушение главы 4
Курс рассчитан на команды по 2–4 человека на протяжении учебного года, но модели Такмана и SSDL не применены. Практические последствия, которые педагог встретит в реальности:
- Стадия «шторм» (около 15% времени цикла, обычно 3–5-е занятие) не предусмотрена: на неё в модуле 1 приходится полевая охота — самая сложная организационно активность. Эталон прямо рекомендует не ставить сложное на шторм.
- Распределение ролей внутри команды описано только для WarWalk (штурман/оператор/протоколист). В остальных модулях роли не заданы — типичный сценарий «один паяет, трое смотрят».
- Стадии SSDL не соотнесены с ролью ведущего, хотя
Программа_курса.mdсодержит блестящую заготовку для этого («не знаю — давай измерим» — это роль фасилитатора стадии 3).
3.5. Когнитивная нагрузка не управляется — нарушение главы 6
Тексты плотные, богатые и предназначены ведущему — здесь всё в порядке. Проблема в детской траектории: отсутствует практика извлечения (retrieval practice) и интервальное повторение, названные в главе 6 самыми сильными эффектами. Каждое занятие в материалах начинается с новой активности, ни одно — с мини-квиза по прошлому. Таблица сквозной прогрессии понятий в Программа_курса.md — идеальная основа для кумулятивных возвратов, но как инструмент повторения она не используется.
4. Актуальность содержания
4.1. Что актуально и конкурентоспособно
Содержание соответствует состоянию отрасли на 2026 год и по ряду тем опережает типовые школьные программы:
- LPWAN / LoRaWAN — технология в фазе зрелого промышленного внедрения (ЖКХ, АСКУЭ, умный город). Прямое попадание в кадровый запрос.
- Событийная архитектура и энергобюджет — сквозная тема современного embedded, редко преподаётся в школе вообще.
- GNSS-спуфинг — тема, ставшая практически значимой; наличие собственного зафиксированного наблюдения в живом эфире делает материал уникальным. Такого нет ни в одном известном школьном УМК.
- ROC, цена ошибок I/II рода, ground truth — фактическое введение в ML-методологию без ML-хайпа. Методологически честнее большинства «курсов ИИ для школьников».
- Цензурированные данные и ошибка выжившего — университетский уровень статистической культуры.
4.2. Содержательные пробелы
| Пробел | Почему важен | Приоритет |
|---|---|---|
| Нет работы с ИИ-инструментами | В 2026 году навык верификации вывода LLM — базовая грамотность; жюри чемпионатов об этом спрашивают | высокий |
| Нет версионирования (git) | Командная инженерная работа без VCS не воспроизводима; требование почти всех чемпионатов | высокий |
| Экономика без цифр и источников | PowerSentry §1 оперирует качественными утверждениями — уязвимость на защите | высокий |
| Нет ГОСТ-оформления и работы с источниками | Обязательно для конференций (Сириус, ВОШ по проектам) | средний |
| ГЛОНАСС как приоритетная система | Для российских конкурсов — идеологически и технически значимо; в материалах ГЛОНАСС фигурирует только как индикатор спуфинга | средний |
| Нет тем импортозамещения элементной базы | Прямой вопрос жюри «а если Ebyte недоступен?» | средний |
| Отсутствуют статистика значимости и погрешность | WarWalk аппроксимирует n, но без доверительного интервала | средний |
4.3. Безопасность и нормативная рамка — критично
Это самый серьёзный дефект с точки зрения допуска к работе с детьми.
Отдельно отмечу добросовестность автора: во всех модулях есть оговорка «сверьте актуальную редакцию решения ГКРЧ — это инженерная документация, не юридический документ». Это честно, но для образовательной организации недостаточно — нужен документ, снимающий вопрос с педагога.
5. Перспективность для олимпиад, чемпионатов и БВИ
5.1. Что даёт БВИ, а что — баллы: рамка
Здесь важно избежать распространённого заблуждения.
Отсюда две разные стратегии, и материалы годятся для обеих, но по-разному.
5.2. Оценка по конкретным трекам
| Трек | Что даёт | Пригодность материалов | Что нужно доделать |
|---|---|---|---|
| НТО (Национальная технологическая олимпиада), профили «Интернет вещей», «Беспроводные технологии связи», «Умный город» | Перечень РСОШ; при I–II уровне — БВИ или 100 баллов за предмет | Очень высокая. PowerSentry и BeaconRadio почти дословно ложатся на профиль | Индивидуальная подготовка по теории (профили требуют личного решения задач, не только командного проекта) |
| ВсОШ по физике / информатике | Заключительный этап → БВИ | Низкая напрямую. Материалы не готовят к олимпиадным задачам | Использовать как мотивационную базу, готовить отдельно |
| Большие вызовы (Сириус), направления «Умный город», «Беспроводные технологии» | Индивидуальные достижения, смена в Сириусе, выход на РСОШ | Очень высокая. Формат «исследовательский проект с полевыми данными» — точное совпадение | Оформление по требованиям: гипотеза, методика, обработка с погрешностями, выводы |
| ИРС / конференции школьников (Курчатовский проект, Юниор, ВКШ) | Индивидуальные достижения | Высокая | ГОСТ-оформление, обзор источников |
| WorldSkills Juniors / Профессионалы, компетенции «Интернет вещей», «Электроника» | Индивидуальные достижения, портфолио | Средняя. Формат — работа по ТЗ на время, а не проект | Тренировка скоростного выполнения по регламенту |
| Кружковое движение НТИ, хакатоны | Портфолио, знакомства | Высокая | Готовность к 48-часовому формату |
5.3. Самые перспективные заявки на базе имеющегося
По моей оценке, из материалов прямо сейчас можно собрать три конкурентоспособные конкурсные работы:
«Детектирование GNSS-спуфинга бюджетным приёмником по кросс-констелляционной сигнатуре» (на базе BeaconRadio). Тема остро актуальна, наблюдение подлинное, метод (нулевой ГЛОНАСС при отличном HDOP) воспроизводим и дёшев. Это работа уровня призового места на «Больших вызовах». Требуется: серия из 20+ измерений, статистика, формализация решающего правила, оценка ложных срабатываний.
«Обоснование ёмкости LPWAN-сети коммунального мониторинга: от энергобюджета узла к городской инфраструктуре» (на базе PowerSentry). Сильна именно инженерно-экономической полнотой, которая редко встречается у школьников. Требуется: реальные цифры по потерям воды со ссылками, расчёт окупаемости, валидация модели ALOHA собственными измерениями.
«Верификация лог-дистанционной модели распространения радиоволн натурными измерениями в городской застройке» (на базе WarWalk). Классическая исследовательская работа с собственным датасетом. Требуется: доверительные интервалы для показателя
n, сравнение с моделями (COST-231/Окумура—Хата), обсуждение систематических погрешностей.
5.4. Чего критически не хватает для конкурсов
| Дефицит | Последствие на защите |
|---|---|
| Нет обзора аналогов и патентного поиска | «А чем ваше решение отличается от существующих?» — первый вопрос жюри |
| Нет обработки погрешностей и статистической значимости | Работа переводится из исследовательских в «поделки» |
| Нет ГОСТ-оформления и списка литературы | Формальное снижение баллов |
| Нет чёткого разделения личного вклада в команде | Индивидуальные достижения не засчитываются |
| Нет культуры ведения лабораторного журнала детьми | Невозможно доказать авторство и объём работы |
6. Что добавлено этой экспертизой
Для устранения выявленных дефицитов в каталог Pedagogics/Ekspertiza/ добавлены рабочие документы:
7. Заключение эксперта
Комплекс представляет собой редкий и ценный образовательный ресурс с несформированной методической оболочкой. Его сильная сторона — подлинность: за каждым уроком стоит реальная отладка, реальная ошибка и реальное измерение, чего невозможно имитировать и что дети безошибочно чувствуют. Принципы «лог — это правда, мнение — нет», «не знаю — давай измерим», «воспроизводимость вместо правильного ответа» методологически точнее многих официальных программ.
Слабая сторона — системная: автор проектировал от содержания, а не от результата, и потому не может доказать образовательный эффект. Для внутренней работы это терпимо; для аттестации, конкурсного отбора и тиражирования — нет.
Рекомендация: к использованию допустить при условии первоочередного закрытия блока безопасности (§4.3) и внедрения карты целей и рубрик (документы 1–2). Остальное — в течение учебного года.
При закрытии выявленных дефицитов комплекс выходит на уровень, достаточный для представления в качестве авторской программы дополнительного образования и для системной подготовки участников НТО и «Больших вызовов».