Авторский блог А.Г. Шмелёва
-
DeepSeek самокритично признал, что пока ему есть чему поучиться у специалиста-тестолога
«Сохранить профессиональное достоинство, но с теплотой!» — Вы когда-нибудь ожидали такой девиз от цифровой машины? ==================Итак, коллеги, вчера у меня состоялся в каком-то смысле удивительный и эпохальный диалог с системой DeepSeek. И до этого диалога я испытывал уже не раз всевозможные эмоции — и восторги, и разочарования чередовались. Но тут восторг у меня явно перевесил!…
-
Как численность выборки влияет на величину КД (коэффициента дискриминативности) для отдельных заданий.
Итак, за последнюю неделю к нашим результатам по шуточному тестику «Буба-Кики» добавилась еще одна сотня протоколов. Это подключились подписчики нашего проекта КИТТ, которым мы разослали приглашение на этот тест по э-почте. Теперь у нас почти 2 сотни протоколов (точная цифра — 196), и мы можем сравнить, какими были и какими стали коэффициенты КД для каждого…
-
Эффект «буба-кики» (результаты)
Итак, мы получили 96 протоколов — от 96 участников нашего шуточного эксперимента «Буба-Кики». Здесь мы даем скриншоты — результат автоматизированного анализа тестовых заданий в нашей системе HT-LINE 3.0. Как видим, наша компьютерная программа автоматически подсчитывает частотность ответов и ключевой коэффициент КД — коэффициент дискриминативности для каждого задания. Хотите узнать подробности о том, что такое КД?…
-
Хватит ли Вашего логического мышления для работы в роли методиста — разработчика тестовых заданий? (онлайн-тест и его результаты)
Итак, три дня отведенных на наш условный конкурс (на самом деле очень дружеский) завершились! На удивление тест оказался популярным. Его выполнили уже 61 человек (и это еще не окончательная цифра — мы продолжаем держать тест открытым). Причем более трети (22 человека, или 37%) показали максимальный 100-процентный результат (!). Вот как выглядит гистограмма распределения тестовых баллов:…
-
Старые песни о космосе — «разбор полетов»
Итак, коллеги, за минувшие выходные мы собрали 22 протокола с ответами на наш короткий шуточный тестик «Старые песни о космосе». Это, конечно, маловато, но… взгляните ниже: уже такая маленькая выборка позволяет применить статистический подход к анализу качества тестовых заданий. ВНИМАНИЕ: кто еще хотел бы пройти тестик, то сделайте это по ссылке, которую я привожу в…
-
Новогодний диктант и проблема формирования обоснованных границ для оценок
Уважаемые читатели «авторского блога А.Г.Шмелева»! Вначале хотелось бы просто поздравить Вас с наступающим Новым 2025 годом и предложить пройти «поздравительный тест». https://test.ht-inc.ru/test/521c36be2082ea6f6bbe0e664a8a0f53 Этот тест, конечно, уступает нашим предыдущим новогодним поздравительным тестам в клубе КИТТ. Уступает по уровню веселья и развлекательности. Но зато он дает определенную пищу для размышления. Как часто начинающие «тестологи» (организаторы массового тестирования)…