Loading presentation...

Present Remotely

Send the link below via email or IM

Copy

Present to your audience

Start remote presentation

  • Invited audience members will follow you as you navigate and present
  • People invited to a presentation do not need a Prezi account
  • This link expires 10 minutes after you close the presentation
  • A maximum of 30 users can follow your presentation
  • Learn more about this feature in our knowledge base article

Do you really want to delete this prezi?

Neither you, nor the coeditors you shared it with will be able to recover it again.

DeleteCancel

Make your likes visible on Facebook?

Connect your Facebook account to Prezi and let your likes appear on your timeline.
You can change this under Settings & Account at any time.

No, thanks

История разработки теста CaseSales

No description
by

Vitaly Altukhov

on 7 October 2014

Comments (0)

Please log in to add your comment.

Report abuse

Transcript of История разработки теста CaseSales

Пример #1. Интернет - выборка
Пример #2. Коммерческие компании
Обсуждение результатов
Вместо заключения
Учавствуйте в валидизации!

- валидные тесты не берутся из "ниоткуда".
- валидизация внутри компании залог работоспособности теста.
- делайте валидизацию сами.
- участие в валидизации дает и экономический эффект.
История разработки теста CaseSales
Ответственность
Влияние
Предприимчивость
Клиенториентиро ванность
Ассертивность
"Большая пятерка" продаж
Кейсы в методике
От теории к практике: опыт валидизации теста CaseSales
Дополнительно
Визуальная диагностика - способность составить верное впечатление о человеке и его качествах на основе фотопортрета.
Итого
Тест CaseSales
Основные моменты
Тестирование на выборке добровольцев.
Объем выборки - 200 человек
Процедура: заполнение анкетных данных - тестирование.
Характеристики выборки
Результаты
Надежность как мера согласованности и устойчивости ответов респондентов.
Оптимальный коэффициент надежности для шкал кейсовых методик от 0,4.

Среднее по данному тесту - 0,64.
Результаты
Валидность как мера взаимосвязи результатов теста с внешним критерием успешности.
Значимые коэффициенты корреляции выделены отдельно (p<0,05).


О чем могут говорить цифры?
0,32 - много или мало?

Для сравнения - корреляция личностных тестов (на примере теста "Большая пятерка") с успешностью в продажах составляет около 0,2.

Корреляция в
0,32
обеспечивает корректный прогноз успешности примерно в
67%
случаев.

Совокупный прирост эффекта с учетом множественных корреляций может доходить до 0,45-0,5 (до 75%).
Основные моменты
Участники исследования - 7 коммерческих компаний (банковская сфера, производство, оборудование, консалтинг и услуги и т.п.).
Выборка - 450 человек.
Процедура: внесение данных сотрудником и HR - тестирование.
Процедура
Основание занесения группу - наличие объективных данных по успешности сотрудников: показатели по продажам, выполнение KPI, оценки руководителей либо оценочных процедур (360 и т.п.).

Внесение информации в этот раздел анкеты является опциальным, и предусмотрен для случаев, когда специалист по тестированию обладает необходимой информацией по участникам исследования.
Характеристика выборки
Результаты
Группа наиболее успешных набирает значимо более высокие баллы по тесту, чем группа неуспешных (Критерий Манн-Уитни, Z=2,4, p=0,03).

Фи-коэф. для средне-контрастных групп =
0,3 (65%)

Фи-коэф. для ярко-контрастных групп =
0,4 (70%)
p<0,05
Можно ли сравнить выборки?
Существует связь теста с критериями успешности на обеих выборках.

Выборки достаточно разные.

В ситуации оценки мнения людей и показатели HR об их успешности отчасти совпадают.

Основная проблема интернет выборок
-
доверие
. Мы не знаем, кто они, и вынуждены перепроверять.
Как расчитать точность прогноза?
P = 0,5 +r*0,5
(простейший вариант)

P- вероятностность успешного прогноза
r - корреляционная мера валидности
0,5 - усредная жесткость отбора и простота работы

- Нужно базироваться на "чистых" показателях валидности (без учета надежности)

- Лучше использовать коэф. корреляции и регрессии

- Прогностические данные приоритетнее текущих срезов

Виталий Алтухов
Лаборатория "Гуманитарные технологии"

Спасибо!
Виталий Алтухов
Лаборатория "Гуманитарные Технологии"

alt@ht.ru

Сайты:
ht.ru
maintest.ru

Подробнее по теме:
http://maintest.ru/kb/articles/article2/

"Мы работаем, чтобы тесты работали!"
От чего еще зависит точность (кроме валидности)?
"Жесткость" отбора
- чем жестче фильтр, тем точнее отбор.

"Простота работы"
- чем проще работа, тем точнее отбор.

To read:
Тейлор-Рассел
Н.Абрахамс
А.Г. Шмелев
Full transcript