Resumo O objetivo do presente estudo foi analisar como o atual conceito e as fontes de evidências de validade são utilizados no âmbito da avaliação educacional em larga escala no Brasil. Para tanto, foi realizada uma análise documental, por meio dos relatórios oficiais das maiores avaliações educacionais nacionais aplicadas no país. Os resultados obtidos indicaram que não são apresentadas fontes de evidências de validade suficientes para que se julgue que os testes educacionais analisados sejam válidos para o que se propõem. Ainda é necessário desenvolver o conhecimento técnico dos pesquisadores brasileiros que realizam estudos de validação de testes educacionais, especialmente no âmbito das informações que devem ser levantadas e apresentadas a fim de que se possam utilizar com confiança os resultados obtidos nas provas e nos testes educacionais aplicados no país.

Abstract This study aimed to analyze how the current concept of validity and its sources of evidence have been utilized on large-scale assessment in Brazil. We made a documentary analysis using the official reports of the most important national educational assessments. The results indicated that the reports do not present adequate information about sources of evidence validity, which makes unfeasible to judge the validity of the educational tests analyzed. In this context, it is difficult to say if these tests evaluate what they propose. Therefore, we conclude that, in Brazil, it is still necessary to improve both understanding about what validity is, and what information is necessary to be able to use with confidence the results of different assessments applied in Brazil.

Resumen El objetivo del presente estudio fue analizar cómo el actual concepto y las fuentes de evidencia de validez se utilizan en el marco de la evaluación educativa a gran escala en Brasil. Para ello, se realizó un análisis documental, a través de los informes oficiales de las mayores evaluaciones educativas nacionales aplicadas en el país. Los resultados obtenidos indicaron que no se presentan suficientes fuentes de evidencia de validez para juzgar que las pruebas educativas analizadas son válidas para lo que proponen. Aún es necesario desarrollar el conocimiento técnico de los investigadores brasileños que realizan estudios de validación de pruebas educativas, especialmente en el ámbito de la información que debe ser recolectada y presentada a fin de que se puedan utilizar con confianza los resultados obtenidos en los testes y pruebas educativas se apliquen en el país.

O presente estudo tem como objetivo construir e validar um questionário que contemple a percepção docente no processo de autoavaliação institucional da Universidade de Brasília. Para tanto, foram considerados os eixos do Sistema Nacional de Avaliação da Educação Superior (Sinaes), foi realizada pesquisa bibliográfica e um grupo focal foi conduzido com docentes. Com base nas informações obtidas foi elaborada uma primeira versão do questionário, que passou por um refinamento por meio da avaliação de seis juízes. A versão final do instrumento foi enviada pela internet aos docentes da UnB. Os resultados indicaram relevantes evidências de validade da estrutura composta por três fatores: Infraestrutura física; Planejamento, Avaliação, Desenvolvimento e Gestão Institucional e Políticas acadêmicas e gestão do corpo docente. Conclui-se, que o questionário de autoavaliação institucional a ser respondido pelo docente apresentou evidências suficientes para ser incorporado ao processo de autoavaliação da Universidade de Brasília.

This study aims to construct and validate a questionnaire that considers the professor’s perception in the institutional self-evaluation process at University of Brasilia. Therefore, Sinaes axes, bibliography research and a focus group with professors were considered. Based on this information we constructed a preliminary version of the questionnaire, which was refined by the assessment of six judges. The questionnaire final version was sent by Internet to UnB professors. The results indicate important validity evidences of structure composed by three factors: Physical Infrastructure; Planning, Evaluation, Development and Institutional Management and Academic politics and professor management. We conclude that the institutional self-evaluation questionnaire to be answered by the professors presented sufficient evidence to be incorporated to University of Brasilia self-evaluation process.

A presença de uma quantidade considerável de itens com funcionamento diferencial (DIF) pode tornar um teste menos válido. Assim, este estudo investigou a existência de DIF no teste de inteligência SON-R 2½-7[a]. O teste é a versão abreviada do SON-R 2½-7, normatizado e validado em vários países da Europa. Os dados de 1.200 crianças da normatização brasileira foram utilizados para identificar a presença de DIF em relação à gênero e região, usando o método da TRI. Os resultados indicaram que, de um total de 60 itens, 5 itens apresentaram DIF entre os sexos e 13 itens apresentaram DIF entre as regiões. Conclui-se que há adequabilidade da maioria dos itens, o que viabiliza o uso do SON-R 2½-7[a] em contexto nacional.

The presence of a considerable amount of items with differential functioning can make a test less valid. Therefore, the existence of Differential Item Functioning (DIF) in the intelligence test SON-R 2½-7[a] was investigated. This is the abridged edition of the SON-R 2½-7 with normatization and validation studies realized in various European countries. The data of the Brazilian normatization sample of 1,200 children were used to verify the presence of DIF in relation to gender and region using the IRT method. Of a total of 60 items, 5 items were indicated as having DIF for gender and 13 items as having DIF between regions. It was concluded that the majority of the items were adequate, which makes the use of the test feasible in a national context.

Um processo de validação adequado é fundamental para assegurar uma interpretação correta dos resultados de um teste. Assim, este estudo investigou a validade convergente do teste não-verbal de inteligência SON-R 2½-7[a] com o WPPSI-III e o WISC-III. O teste é a versão abreviada do SON-R 2½-7, de origem holandesa, normatizado e validado em vários países da Europa. No total, 109 crianças de três estados brasileiros participaram do estudo. A correlação entre o SON-R 2½-7[a] e o WPPSI-III foi igual a 0,75 e com o WISC-III foi de 0,69. Esses coeficientes de validade são muito semelhantes aos encontrados em estudos feitos com o SON-R 2½-7 em outros países. Conclui-se que os resultados indicam uma validade convergente satisfatória do teste SON-R 2½-7[a].

An adequate validation process is fundamental to ensure sound interpretations of test results. Thus, this study aimed to investigate the convergent validity of the SON-R 2½-7[a] with the WPPSI-III and the WISC-III. The test is an abridged edition of the SON-R 2½-7, a Dutch non-verbal intelligence test, with normatization and validation studies done in several European countries. A total of 109 children from three Brazilian states participated in the study. The correlations of the SON-R 2½-7[a] with the WPPSI-III and with the WISC-III were .75 and .69, respectively. The validation coefficients encountered are very similar to the ones found in studies with the SON-R 2½-7 in other countries. The results imply a satisfactory convergent validity of the SON-R 2½-7[a].

O presente estudo visa contribuir para a comprovação da estrutura fatorial da Escala de Atitudes Frente a Relacionamentos Afetivos Estáveis (RAE; Reis, 1995). Participaram da pesquisa 658 estudantes universitários com idade média 19,9 anos (DP=2,5). Análises fatoriais exploratórias e confirmatórias indicaram a existência de uma estrutura multidimensional. Os cinco fatores encontrados (Comprometimento, Edificação, Mutualidade, Envolvimento e Indulgência) apresentaram índices de consistência interna satisfatórios (0,68<α<0,83), itens com saturações altas (0,46<λy<0,75) e significativas (p<0,05). Esta estrutura multidimensional apresentou melhores índices de bondade de ajuste (χ2/gl=3,07; GFI=0,91; CFI=0,97; RMSEA=0,056) e foi estatisticamente superior [Δχ2(111)=676,69, p<0,001] à estrutura unidimensional. Resultados de correlações com as auto-imagens independente e interdependente (Singelis, 1994), com os valores humanos básicos (Gouveia, 2003), além de diferenças quanto ao sexo, confirmam a validade dos cinco novos fatores.

This article investigates the factor structure of the Stable Affective Relationships Scale (SAR; Reis, 1995). Exploratory and confirmatory factor analyses of data from 658 Brazilian undergraduate students with average age 19.9 years old (SD=2.5), are reported. These analyses revealed five factors underlying the items on the SAR (Commitment, Construction, Mutuality, Involvement, and Indulgence) that are important in a stable affective relationship. All five factors presented good reliability (.68<α<.83), items with high (.46<λy <.75) and significant (p<.05) factor loadings. This five-factor structure had a better fit to the data (χ2/df=3.07; GFI=.91; CFI=.97; RMSEA=.056) and was statistically better fitting [Δχ2(111)=676.69, p<.001] than the unidimensional structure. The results also provided support for the validity of these new factors in exploring correlation with independent and interdependent self-construals (Singelis, 1994), basic human values (Gouveia, 2003) and gender differences.

Este estudo teve como objetivo adaptar para o Brasil a Escala de Comportamentos Socialmente Responsáveis do Consumidor - ECSRC (Roberts, 1996), cujo objetivo principal é avaliar em que medida os consumidores tendentes a expressar condutas indicativas de preocupação de ordem social também as levam em consideração no momento de adquirir seus produtos. Participaram 298 estudantes universitários, com idade média de 21 anos (d.p. = 4,60), sendo a maioria do sexo feminino (72,4%). Por meio de uma análise fatorial dos eixos principais (PAF) com rotação promax foram identificados três fatores que explicam conjuntamente 41,1% da variância total. O primeiro fator agrupou cinco itens e foi denominado como preocupação ambiental (a = 0,90), o segundo, preocupação com reciclagem, ficou composto por quatro itens (a = 0,75); e, por fim, o fator denominado de preocupação social (a = 0,70) reuniu seis itens da escala. Estes resultados são coerentes com a concepção de que múltiplos fatores são necessários para avaliar o comportamento do consumidor, ademais sugerem a adequação da ECSRC ao contexto brasileiro.

The objective of this study was to adapt The Socially Responsible Consumer Behavior Scale -ECSRC (Roberts, 1996) to Brazil. The main objective of this scale is to evaluate to what degree consumers who tend to express conduct which indicates social responsibility take this conduct into consideration at the moment of product acquisition. Two hundred ninety-eight university students (average 21 yrs old, d.p. = 4.60, 72.4% female) participated in this study. Three factors, which explain 41.1% of the total variance were found through an analysis of the principal axes (PAF) with a Promax rotation. The first factor grouped five items together and was called environmental concern (a = 0.90), the second, concern about recycling, was composed of four items (a = 0.75) and, finally, six items from the scale were grouped together in the third factor called social concern (a = 0.70). These results are coherent with the conception that multiple factors are necessary to evaluate consumer behavior, and also, suggest the adequacy of the ECSRC to the Brazilian context.

Este trabalho objetivou conhecer como os valores humanos estão relacionados às atitudes preconceituosas e à intenção em manter o contato social com pessoas negras. Para tanto, contou-se com uma amostra de 303 pessoas da população geral da cidade de João Pessoa (PB), a maioria mulheres com idades compreendidas entre 12 e 74 anos (M = 30,5; DP = 14,2). Seguindo-se um procedimento padrão, foi pedido que respondessem aos seguintes instrumentos: Escala de Atitudes Preconceituosas, Escala de Intenção de Contato Social, Questionário dos Valores Humanos Básicos e um questionário de Caracterização da Amostra. Os resultados foram consistentes em relação a achados anteriores. As atitudes preconceituosas correlacionaram-se principalmente com os valores suprapessoais. Encontrou-se, ademais, que os valores suprapessoais e de realização atuaram como bons preditores para as atitudes preconceituosas, e que estas foram boas explicadoras da intenção em manter contato social com negros.

The current research aimed to know how the human values is related to the prejudiced attitudes and to the intention to maintain social contact with Blacks. 303 subjects from the general population of João Pessoa (PB) were considered. The respondents were mainly women, and the ages varying from 12 to 74 years (M = 30,5; DP = 14,2). The Prejudiced Attitudes Scale, Intention to Maintain Social Contact Scale, Basic Human Values Questionnaire and demographics questions were applied. Results showed that the prejudiced attitudes were primarily correlated with the suprapersonal values. Furthermore, the suprapersonals and of achievement values were good predictors, and satisfactory to explain the intention in maintaining social contact with Blacks.