Precisão de avaliadores na avaliação da criatividade por meio da produção de metáforas

Ricardo Primi,Gleiber Couto,Fabiano Koich Miguel,Monalisa Muniz

doi:10.1590/s1413-82712007000200008

Abstract

A criatividade é um dos temas da psicologia cuja mensuração está circundada de dificuldades, já que é uma área carente de bons instrumentos. Metáforas como "O camelo é o barco do deserto" são meios de expressão de aspectos diferente de algum conceito (camelo) por meio da associação de idéias. A elaboração de metáforas desse tipo pressupõe a execução de processos cognitivos básicos, tais como o raciocínio analógico e as associações remotas, processos esses que estão associados aos componentes cognitivos da criatividade. Objetivou-se nesta pesquisa estudar a precisão de critérios de pontuação de um instrumento de avaliação da criatividade por meio de produção de metáforas que avalia respostas metafóricas a partir de um estímulo do tipo "O camelo é o ______ do deserto". Participaram deste estudo 19 sujeitos e nove juízes. O teste de metáforas é composto por nove itens, aos quais os sujeitos deram um total de 513 respostas. Cada resposta foi avaliada independentemente pelos juízes, em uma escala de 0 a 3, indicando o nível de elaboração da metáfora. A precisão foi calculada a partir do modelo de Rasch, assumindo cada idéia como um caso e cada juiz como um item de um teste hipotético, aplicando-se um procedimento chamado rede de juízes ancorados. A precisão de avaliadores variou de 0,52 a 0,83, com média 0,74 (DP=0,08), indicando uma boa precisão de avaliadores.

Highlights

Inter rater reliability in the creativity assessment using metaphor production Abstract The measure of creativity is a difficult task in psychology and there is a shortage of good quality instruments
Cada idéia é pontuada por juízes treinados em uma escala de 0 até 3
Gleiber Couto é psicólogo pela PUC-MG, doutorando em Avaliação Psicológica pela Universidade São Francisco – USF e bolsista Capes vinculado ao Laboratório de Avaliação Psicológica e Educacional – LabAPE

Summary

Material e procedimento

Material e critérios de pontuação O instrumento utilizado foi o Teste de Criação de Metáforas – TCM, formas A e B (Primi e cols. 2006), sendo cada forma composta por nove itens, com os dois primeiros comuns às duas formas. Pontuação 2 Uma idéia C que atinja o critério para ser pontuação 1 e que também possua remoticidade avançada e resposta D da analogia correta. Assim temos uma matriz de 513 idéias que foram pontuadas por 9 juízes (itens). Cada idéia pode receber uma pontuação total pela soma de pontos dos vários juízes que a corrigiram. Mas uma das vantagens importantes de serem notadas é que o modelo acomoda os dados ausentes (células de juízes que não pontuaram uma determinada resposta) e atribui uma pontuação equiparável às idéias, isto é, na mesma escala, mesmo que esta tenha sido obtida por diferentes combinações de juízes. Essa análise estima uma medida Rasch (teta) para cada idéia a partir dos escores brutos atribuídos pelos juízes. O WINSTEPS oferece outros índices analíticos e gráficos que permitem depurar o estudo da precisão da aplicação do sistema de pontuações feito pelos juízes, que serão tratados a seguir na seção resultados

Resultados e discussão

Desvio padrão

Findings

Considerações finais