Авторский блог А.Г. Шмелёва
-
Рекламная короткая версия теста «Логика на кругах Эйлера» оказалась весьма популярной
Наша рекламная июньская акция с использованием укороченной версии теста «Логика на кругах» оказалась весьма популярной. В этой версии в отличие от первой исследовательской версии было только 10 заданий, а не 15 (решили сделать ее покороче). Ее выполнили в течение трех недель 531 человек. Хотя… при этом прошли на второй тур из этой полутысячи человек только…
-
DeepSeek самокритично признал, что пока ему есть чему поучиться у специалиста-тестолога
«Сохранить профессиональное достоинство, но с теплотой!» — Вы когда-нибудь ожидали такой девиз от цифровой машины? ==================Итак, коллеги, вчера у меня состоялся в каком-то смысле удивительный и эпохальный диалог с системой DeepSeek. И до этого диалога я испытывал уже не раз всевозможные эмоции — и восторги, и разочарования чередовались. Но тут восторг у меня явно перевесил!…
-
Как численность выборки влияет на величину КД (коэффициента дискриминативности) для отдельных заданий.
Итак, за последнюю неделю к нашим результатам по шуточному тестику «Буба-Кики» добавилась еще одна сотня протоколов. Это подключились подписчики нашего проекта КИТТ, которым мы разослали приглашение на этот тест по э-почте. Теперь у нас почти 2 сотни протоколов (точная цифра — 196), и мы можем сравнить, какими были и какими стали коэффициенты КД для каждого…
-
Эффект «буба-кики» (результаты)
Итак, мы получили 96 протоколов — от 96 участников нашего шуточного эксперимента «Буба-Кики». Здесь мы даем скриншоты — результат автоматизированного анализа тестовых заданий в нашей системе HT-LINE 3.0. Как видим, наша компьютерная программа автоматически подсчитывает частотность ответов и ключевой коэффициент КД — коэффициент дискриминативности для каждого задания. Хотите узнать подробности о том, что такое КД?…
-
Хватит ли Вашего логического мышления для работы в роли методиста — разработчика тестовых заданий? (онлайн-тест и его результаты)
Итак, три дня отведенных на наш условный конкурс (на самом деле очень дружеский) завершились! На удивление тест оказался популярным. Его выполнили уже 61 человек (и это еще не окончательная цифра — мы продолжаем держать тест открытым). Причем более трети (22 человека, или 37%) показали максимальный 100-процентный результат (!). Вот как выглядит гистограмма распределения тестовых баллов:…
-
Старые песни о космосе — «разбор полетов»
Итак, коллеги, за минувшие выходные мы собрали 22 протокола с ответами на наш короткий шуточный тестик «Старые песни о космосе». Это, конечно, маловато, но… взгляните ниже: уже такая маленькая выборка позволяет применить статистический подход к анализу качества тестовых заданий. ВНИМАНИЕ: кто еще хотел бы пройти тестик, то сделайте это по ссылке, которую я привожу в…