Top.Mail.Ru
Научная база: методики и границы точности | Ролескоп
← На главную

Научная база платформы

На чём построены измерения и как мы контролируем качество

Принцип. «Ролескоп» не изобретает «свою типологию». Мы собираем батареи из опубликованных и открыто проверяемых моделей психометрии — у каждого измерения есть понятное происхождение, которое мы не скрываем.

Что измеряем и на чём это основано

Мышление

Собственный генератор заданий платформы: 16 задач четырёх типов — вербальные выводы, ряды, матрицы и мысленное вращение. Задания строятся по опубликованным моделям рассуждения (отношения и порядок, правила матриц — Carpenter, Just & Shell, 1990), варианты ответа создаются вместе с заданием, ключи хранятся только на сервере. Норм по международным выборкам у блока нет: зоны критериальные (меньше 40 % — «не зафиксировано», 40–70 % — «частично», больше 70 % — «соответствует»), собственные ориентиры платформа накапливает по своим протоколам.

Разработка платформыCarpenter, Just & Shell, 1990
Личность

Модель «Большой пятёрки»: 45 граней в циркумплексной структуре AB5C на пунктах открытого международного пула IPIP. Надёжность интегральных доменов α = 0,87–0,89. Нормы граней измерены на выборке Eugene-Springfield Community Sample (США, Орегон; 1994–1996; N = 570–795 полных случаев, данные открыты под лицензией CC0 1.0). Для направления «Профиль сотрудника» — шестифакторный опросник PRO-60 на пунктах того же пула; границы зон заданы экспертно и уточняются по мере накопления собственной выборки (целевой N ≥ 300).

IPIP · форма AB5C (Bucher & Samuel, 2019)Ashton, Lee & Goldberg, 2007
Потенциал

Четыре блока — обучаемость, драйв, устойчивость, инициатива — на 18 фасетах открытого пула IPIP (форма AB5C-XL, Johnson, 2014; 66 утверждений). Фасетные нормы измерены на выборке Eugene-Springfield Community Sample (США, Орегон; 1994–1996; N = 570–795 полных случаев, α = 0,62–0,74; данные открыты под лицензией CC0 1.0). Блоки складываются в сводный индекс 0–100: веса заданы экспертно, исходя из мета-аналитических данных о вкладе этих черт в эффективность, и калибруются на накапливаемой выборке. Прогнозная валидность композита не установлена: индекс — описательная рамка к профилю, не критериальный прогноз, и не предназначен для сравнения людей между собой.

IPIP · AB5C-XL (Johnson, 2014)
Ценности в работе

Circular Work Value Scale (CWVS): 11 ценностей, образующих круговую структуру и группирующихся в 4 измерения — социальные, престиж, внутренние и внешние. Шкала нормативная: балл ценности — среднее трёх её пунктов по шкале значимости 1–7. Профиль показывает личную иерархию приоритетов, а не «оценки». Норм на русской выборке пока нет — платформа накапливает их по мере прохождений.

Schneider et al., 2024 · CWVS · CC BY 4.0
Отношение к себе

Шкала самооценки Розенберга и шкала удовлетворённости жизнью SWLS — классические инструменты, свободные для исследовательского и практического использования.

Rosenberg, 1965Diener et al., 1985
Профессиональные интересы

Типология профессиональных сред Холланда (RIASEC), индекс согласия C для сопоставления профиля с профессиональными семействами; коды профессий — по открытой базе O*NET.

RIASECBrown & Gore, 1994O*NET
Эмоциональное благополучие

Скрининг рабочего состояния на современной многокомпонентной модели выгорания — опросник BAT в официальной русскоязычной версии: пункты и шкалы без изменений, пороги — клинические cut-off в пересчёте на средний балл 0–4; истощение, эмоциональная дистанция, снижение когнитивного и эмоционального контроля. Это опросник самооценки, а не медицинская диагностика.

Schaufeli, Desart & De Witte, 2020burnoutassessmenttool.be
Условия работы и вовлечённость

Открытый инструмент HSE Management Standards (© Crown, Open Government Licence), шкала выгорания Copenhagen Burnout Inventory (public domain), индекс eNPS.

HSE · OGLKristensen et al., 2005eNPS
Корпоративная культура и вовлечённость

Модель конкурирующих ценностей: четыре типа культуры и анализ разрывов «сейчас / желаемое». Пункты — собственная разработка на опубликованной модели.

Cameron & Quinn
Командное взаимодействие

Ролевые предпочтения и командный климат — на опубликованных конструктах командной эффективности.

Hackman · Edmondson · Salas
Профориентация «Компас» (с 14 лет)

Шесть измерений в одной батарее: интересы, рассуждение, личность, ценности, готовность к выбору и контроль достоверности. Каждое — на опубликованной методике с открытым происхождением; числовая интерпретация выводится только там, где есть опубликованные нормы, остальное работает как материал для размышления.

Методики и нормы — подробно

Интересы — ORVIS-SF. сокращённый опросник профессиональных интересов, отображение на типологию Холланда (RIASEC); нормы стандартизации Pozzebon et al., 2010, N = 665, α = .79–.90.

Рассуждение — блок «Мышление». собственный генератор заданий платформы на опубликованных моделях рассуждения (отношения и порядок, ряды, матричные правила Carpenter, Just & Shell, 1990, мысленное вращение). Задания и варианты ответа создаются кодом, ключи закрыты на сервере, чужие тестовые материалы не используются. Норм по международным выборкам нет: зоны критериальные — меньше 40 % «не зафиксировано», 40–70 % «частично», больше 70 % «соответствует»; ориентиры предварительные, платформа накапливает собственные протоколы. Для 14–17 лет категории «выше/ниже среднего» не выводятся — результат читается как ориентир.

Личность — IPIP-50. модель «Большой пятёрки», пункты открытого пула IPIP (public domain), α = .76–.90.

Ценности — CWVS (Circular Work Value Scale). 11 ценностей, образующих круговую структуру (Schneider et al., 2024, лицензия CC BY 4.0; атрибуция: Schneider, J., Striebing, C., Hochfeld, K. et al. (2024). Establishing circularity: development and validation of the circular work value scale (CWVS). Frontiers in Psychology, 15, 1296282. DOI 10.3389/fpsyg.2024.1296282). Русская версия — адаптация платформы: прямой перевод, слепой обратный перевод и судейское ревью; психометрическая проверка на русской выборке и нормы — в процессе, платформа накапливает их по мере прохождений. Показывается личная иерархия приоритетов без сравнения с нормами и другими людьми. В оригинале три ценности имеют пониженную надёжность (Удовольствие α/ω ≈ .66/.68; Традиционные ценности ≈ .61/.61; Безопасность ≈ .71/.71 — по немецкой выборке), а «Безопасность» неоднородна по содержанию.

Готовность к выбору (ГВ-25) и карьерная адаптивность (КА-12). авторские методики платформы на опубликованных моделях (Crites; Taylor & Betz; Savickas, 4C); статус: калибровка, рефлексивный режим — без числовых оценок до накопления выборки (N ≥ 300–500).

Карта направлений (occmap). 39 семейств профессий с кодами RIASEC; согласие профиля и направления — индекс C (Brown & Gore, 1994); профессии, маршруты обучения и оценка востребованности — экспертный слой, пересмотр ежегодно.

Принцип интерпретации. числовая интерпретация выводится только там, где есть опубликованные нормы и надёжность; всё остальное — материал для размышления. Платформа накапливает собственные нормы и публикует статус калибровки на этой странице.

ORVIS · Pozzebon et al., 2010Мышление · разработка платформыIPIP · ipip.ori.orgCWVS · Schneider et al., 2024 · CC BY 4.0Brown & Gore, 1994Savickas · 4C
Оценка кандидата под должность «Профиль должности»

Тест не готовый, а собирается под конкретную вакансию: требования к должности берутся из международного справочника O*NET (США, лицензия CC BY 4.0; 915 профессий с готовым профилем требований) — стили работы, навыки, области знаний и способности с весами важности, а критерии (4–8) отбирает менеджер под роль. Названия и коды приведены к российской системе: ОКЗ-2014 (ОК 010-2014, МСКЗ-08) — национальная версия ISCO-08; переход O*NET → ОКЗ выполнен по официальной сшивке O*NET↔ESCO и сверен с ОКПДТР-2025 и профессиональными стандартами Минтруда. Измеряются 141 критерий: 121 идёт в индекс с весом, а 20 (сила, гибкость, равновесие, зрение) браузером не измерить — они собираются самоотчётом и в индекс не входят. Норм нет, зоны критериальные: инструмент поддержки решения, а не основание для отказа.

Методики и нормы — подробно

Требования профессии — O*NET. стили работы, навыки, области знаний и способности с весами важности из справочника O*NET (915 профессий с готовым профилем требований); веса берутся из базы и вручную не меняются. Атрибуция: O*NET® — U.S. Department of Labor, Employment and Training Administration; данные используются по лицензии CC BY 4.0 (onetcenter.org). Платформа не связана с USDOL/ETA, эмблемы и логотипы O*NET не применяются.

Привязка к России — ОКЗ-2014. профессии и требования приведены к Общероссийскому классификатору занятий ОК 010-2014 (МСКЗ-08) — национальной версии ISCO-08. Переход O*NET → ОКЗ сделан через официальную сшивку O*NET↔ESCO (Еврокомиссия и Минтруд США: машинное сопоставление с ручной валидацией экспертов) — прямых соответствий O*NET↔ОКЗ в открытом доступе нет, а меры на базе американской базы без сшивки применять нельзя. Коды ОКЗ сверены с ОКПДТР-2025 и профессиональными стандартами Минтруда, названия — с официальными наименованиями.

Что измеряется. 141 критерий: 21 стиль работы, 35 навыков (10 базовых и 25 универсальных), 33 области знаний, 52 способности. В индекс с весом идут 121 критерий (прямое измерение — вес 1, косвенное — 0,5), за индексом остаются 20 способностей: сила, гибкость, равновесие, зрение, слух — браузером они не измеряются и собираются самоотчётом как справочные.

Инструменты. опросник на пунктах открытых пулов IPIP (public domain), ситуационные кейсы из рабочей практики, тесты знаний, открытые ответы с локальной оценкой по маркерам (балл помечен предварительным до экспертной разметки) и 15 интерактивных заданий — внимание, память, психомоторика, слух, восприятие. Интересы — ORVIS-SF с отображением на типы Холланда (RIASEC), достоверность протокола — MC-SDS (Марлоу–Краун).

Границы точности. норм по O*NET нет: американские веса и уровни в другую страну напрямую не переносятся, поэтому зоны критериальные — до 40 % «не зафиксировано», 40–70 % «частично», выше 70 % «соответствует». Ориентиры части заданий предварительные и уточняются по мере накопления выборки. Отчёт — поддержка решения специалиста, а не готовое основание для отказа кандидату.

O*NET · CC BY 4.0O*NET↔ESCO · Еврокомиссия и Минтруд СШАОКЗ-2014 · МСКЗ-08 (ISCO-08)ОКПДТР-2025 · профстандарты МинтрудаIPIP · public domainORVIS-SF · RIASEC · MC-SDS
Контроль достоверности

Каждый протокол проверяется автоматически: контрольная шкала социальной желательности (Марлоу–Краун, 1960), infrequency-пункты и технические маркеры качества ответов. Недостоверный протокол помечается в отчёте и не включается в групповую статистику — при этом отчёт респонденту выдаётся всегда, с явной пометкой о достоверности.

Нормы и честные границы

Там, где есть опубликованные справочные выборки, сравнение помечается как ориентир. Блок мышления работает без норм — по критериальным зонам (меньше 40 % «не зафиксировано», 40–70 % «частично», больше 70 % «соответствует»). Собственные российские нормы формируются на накапливаемой выборке платформы, а предварительные ориентиры прямо помечаются в отчётах. Каждый отчёт показывает границы применимости результата — мы считаем честность о точности частью качества продукта.

Лицензионный статус

Ядро батарей — пункты из открытых пулов (public domain: IPIP, Copenhagen Burnout Inventory, шкалы Розенберга и SWLS), блок мышления — генераторы собственной разработки платформы, остальное — наши пункты на опубликованных моделях. Лицензируемые чужие тестовые наборы платформа не применяет. Инструмент HSE используется по открытой лицензии Open Government Licence с атрибуцией. Опросник BAT — официальная русскоязычная версия: пункты и шкалы без изменений, пороги — клинические cut-off в пересчёте на средний балл 0–4, с атрибуцией авторов (Schaufeli, Desart & De Witte, 2020). Требования к должностям в «Профиле должности» — из справочника O*NET® (U.S. Department of Labor, Employment and Training Administration), лицензия CC BY 4.0: источник указан в отчёте и в карточке направления, эмблемы и логотипы O*NET не используются, платформа не связана с USDOL/ETA.

Вопросы по методологии: info@roleskop.ru