Articles / Статьи

Полная версия статьи доступна по ссылке РИНЦ.

Abstract

Relevance.

Nowadays the researchers commonly use a limited set of standard procedures and statistical coefficients when they develop psychometric instruments and investigate their structure. The routine using of such procedures without taking into account the specific features of psychometric scales can lead to incomplete or even inadequate results. In this context detailed consideration of the structure of psychometric instruments seems to be important and it may demand various non-standard ways of statistical analysis. 

Objectives. 

To conduct detailed analysis of the results of two intelligent subtests at the item level and to assess the sufficiency and adequacy of using standard methods for estimation of reliability and structural validity for these subtests.

Methods.

We analyze the data collected in intelligence testing of a large sample of respondents (11335 young adults). The respondents passed the KR-3 battery. In this study we examine in detail the structure of the subtests "Syllogisms" and "Analogies". Specifically, we estimated the reliability of the scales by the Cronbach's alpha coefficient, and the structure at the item level using the confirmatory factor analysis.

Results and conclusions.

Estimation of the reliability of the scales by Cronbach's alpha coefficient showed the importance of taking into account the time limitation, which is commonly used in intelligence tests. On the other hand, a detailed analysis of each subtest items made it possible to find out an additional factor which was not originally proposed in the factor structure. It is the factor of higher-order abilities of abstract analysis, whilst the subtest originally aimed at esteeming the special abilities. Confirmatory factor analysis showed improvement of fit when this factor was added. The results allow to conclude that the researcher may miss important properties of scales if one does not perform a detailed analysis of testing procedures and the structure of subtest at the item level, and so one may draw incomplete or inadequate conclusions about their psychometric properties.

Аннотация

Актуальность. При разработке психометрических инструментов и оценке их структуры часто используются стандартные процедуры, предусматривающие расчет ограниченного набора коэффициентов. Однако шаблонное использование таких процедур не позволяет учитывать возможные нюансы исследуемых шкал и может приводить к получению неадекватных результатов. В силу этого важным представляется подробный анализ структуры психометрических инструментов, который допускает различные нестандартные приемы. 

Цель нашей работы– на основе данных выполнения двух интеллектуальных субтестов провести более детальный анализ их структуры на уровне отдельных заданий и оценить достаточность применения стандартных методов оценки надежности и структурной валидности для этих субтестов.

Методики и выборка. В качестве материала для анализа мы использовали данные, полученные в ходе тестирования интеллекта у большой выборки респондентов (11335 человек) с помощью батареи «КР-3». В работе подробно рассматривается структура субтестов «Силлогизмы» и «Аналогии»: анализируется надежность шкал, оцениваемая с помощью коэффициента альфа Кронбаха, и факторная структура на пунктовом уровне с помощью конфирматорного факторного анализа.

Результаты и выводы. Оценка надежности анализируемых шкал с помощью коэффициента альфа Кронбаха показала, что получаемые оценки зависят от того, учитывается ли при анализе и отборе результатов влияние ограничения времени, стандартно используемого в групповых тестах на интеллект. С другой стороны, подробный анализ отдельных заданий в каждом из субтестов позволил выделить дополнительный, не заложенный изначально фактор способностей предположительно более общего типа, чем специальные способности, на оценку которых они направлены. Конфирматорный факторный анализ показал существенность этого фактора с точки зрения оценки структуры шкал. Проведенный анализ позволяет заключить, что без подробного анализа процедуры тестирования и структуры заданий исследователь может не заметить важных свойств анализируемых шкал и сделать неполные или неадекватные выводы об их психометрических качествах.

Благодарности. Исследование выполнено при поддержке РФФИ, проект 17-29-07030.

Автор(ы)

Кричeвец А.Н. ; Корнеев А. А. ; Сугоняев К.В.

Рубрикатор

Test and Testing / Психологическое тестирование

Тип публикации

Journal article/ Журнальная статья

Название журнала или сборника

Moscow University Psychology Bulletin / Вестник Московского университета. Серия 14. Психология

Год публикации

2021

Страницы

144-169

DOI Number

10.11621/vsp.2021.01.06

Язык публикации

Ru

Возврат к списку

There are new articles from the «Moscow University Psychology Bulletin»/ Новые статьи «Вестника Московского университета. Серия 14. Психология»

30.03.2015

We are glad to inform you that the new issue of the journal "Moscow University Psychology Bulletin" - 1, 2015 - was released. Carrent Issue: http://msupsyj.ru/en/articles/volumes/2015_1.php

Мы рады представить вам первый номер «Вестника Московского университета. Серия 14. Психология» за 2015 год. http://msupsyj.ru/articles/volumes/2015_1.php

There are new articles from the «National psychological journal»/ Новые статьи «Национального психологического журнала»

30.03.2015

We are glad to inform you that the new issue of the journal "National psychological journal" - 1(17), 2015 - was released. Carrent Issue: http://npsyj.ru/en/articles/volumes/17_2015.php

Мы рады представить вам первый номер «Национального психологического журнала» за 2015 год. http://npsyj.ru/articles/volumes/17_2015.php

About / О проекте New / Новое All material / Все материалы News / Новости Contacts / Контакты
© 2012 — 2021 Psychology. Online abstract digest of psychological sciences

/ ПСИХОЛОГИЯ. Реферативнй интернет-дайджест психологических наук