2.TIG Pre Pos Teste A4
2.TIG Pre Pos Teste A4
2.TIG Pre Pos Teste A4
D E
I M P L E M E N T A O
T C N I C A
# 2
Pr e ps-testes so utilizados para medir o conhecimento adquirido pelos participantes numa formao. O pr-teste um conjunto de perguntas feitas aos participantes antes do incio da formao, com a nalidade de determinar o seu nvel de conhecimento sobre o contedo que ser ensinado. Ao nal da formao, os participantes devem responder um ps-teste com as mesmas perguntas feitas anteriormente, ou perguntas com o mesmo nvel de diculdade. Atravs da comparao das notas do pr-teste com as notas do ps-teste, ser possvel descobrir se a formao foi bem-sucedida em aumentar o conhecimento do participante sobre o contedo da formao. Este guio fornecer informaes acerca de quando e como utilizar os pr e ps-testes, sugestes para desenvolver boas perguntas, instrues sobre como validar e gerir pr e ps-testes, e descrio de como analisar resultados.
Nesta situao, pode ser mais apropriado utilizar um mtodo alternativo para a avaliao da aprendizagem, tal como a observao das capacidades demonstradas numa dramatizao. Quando est a decidir se ir ou no utilizar o pr e psteste, primeiro considere o que mais importante aprender sobre a sua prpria formao. Se deseja compreender exactamente qual conhecimento pode ser atribudo formao em si, importante utilizar a metodologia de pr e ps-teste. Se em vez disso, s necessrio saber se os participantes possuem conhecimento do contedo ou capacidade ao nal da formao, no necessrio fazer o pr-teste. A realizao de um teste somente ao nal da formao, no demonstrar os conhecimentos adquiridos, mas poder avaliar at que ponto os participantes entenderam o material ensinado. Lembre-se que uma das limitaes de qualquer teste de conhecimentos realizado imediatamente depois da formao, que no demonstrar o que as pessoas iro lembrar-se daqui a uma semana ou um ano, nem se eles iro utilizar o que aprenderam durante a formao no seu trabalho.
Desenvolvimento do Pr e Ps-Teste
Testes so instrumentos ou ferramentas utilizadas para medir mudanas. Se a ferramenta em si tiver problemas, no poder medir com preciso as mudanas no conhecimento. Para que um pr e ps-teste seja vlido e convel deve conter perguntas claras e bem escritas. Os tpicos abaixo so sugestes para a criao de boas perguntas: Criar perguntas focalizadas nos objectivos principais da formao. Tente desenvolver ao menos uma pergunta para cada um dos objectivos da formao. Isto vai assegurar que est a perguntar aos participantes para demonstrar seus conhecimentos nos conceitos que os criadores do currculo determinaram serem os mais importantes de toda a formao. Pergunte a si mesmo, Quais so as 10 coisas
PGINA 2
mais importantes nesta formao que um mdico - ou outro prossional de sade necessita saber sobre os cuidados de sade relativos ao HIV? Crie perguntas a partir desta lista de 10 conceitos, factos ou capacidades. Para um seminrio ou outra formao sobre um contedo altamente tcnico, como anti-retrovirais (ARVs) ou infeces oportunistas (IOs), um especialista no assunto deve criar o teste, para assegurar que as respostas incorrectas so aceitveis, que o contedo correcto abordado, etc. No elabore perguntas que exijam memorizao de detalhes irrelevantes. No deve-se avaliar a capacidade dos participantes de memorizar uma palavra ou frase especca, ou sua capacidade de lembrar se a taxa de prevalncia de 13% ou 15%, mas sim se eles aprenderam conceitos importantes e factos relacionados. Incluir somente perguntas que tiveram respostas claras abordadas durante a formao. No avalie os participantes em conceitos ou conhecimentos que no foram devidamente explicados durante a formao. Se existem conceitos importantes que devam ser includos no currculo mas no foram, inclua esta informao na sua prpria avaliao e recomende que estes conceitos sejam includos na prxima vez que a formao for realizada. Desenvolver uma avaliao que demore entre 10 e 25 minutos para ser respondida. O tempo gasto nos pr e ps-testes deve variar de acordo com a extenso da formao e o tipo de perguntas feitas. razovel que o teste de uma formao de uma semana demore mais que o teste de uma formao de dois dias. Testes com perguntas abertas ou de respostas curtas demoraro mais que testes de mltipla escolha com o mesmo nmero de perguntas.
dadeiro/falso os participantes tm a opo entre duas possveis respostas. mais fcil para os participantes demonstrarem uma aprendizagem especca e detalhada atravs de perguntas de mltipla escolha do que atravs de perguntas verdadeiro/falso. Se um teste elaborado para pessoas que no tm o Portugus como lngua materna, evite mudar o tipo de perguntas muitas vezes num mesmo teste. Os participantes podem confundir-se ao interpretar novas instrues, o que ir distra-los do objectivo principal do teste.
PGINA 3
tosse, excepto quando o paciente cobre sua boca problemtica. J que a TB pode se espalhar de vrias maneiras, no claro se a armao quer testar se o participante sabe que a TB pode se espalhar de outras maneiras, ou se ele sabe que cobrir a boca uma forma efectiva de reduzir a transmisso. A palavra excepto d ambigidade e pode causar dvida no participante.
A pergunta de mltipla escolha deve ser mais longa que as opes de resposta. A maioria da informao deve estar concentrada na pergunta, no nas respostas. O participante no deve sentir-se sobrecarregado com o texto ao tentar responder a pergunta correctamente. Revisar a utilidade das perguntas e respostas. Cubra as respostas e leia somente as perguntas. Algum que conhea o contedo da formao deve ser capaz de responder a pergunta sem ler as respostas. Se possvel, pea um outro colega que tambm conhea o contedo da formao para fazer o teste e avaliar as respostas. Se eles tiverem problemas em responder as perguntas correctamente, possvel que as perguntas no sejam sucientemente especcas. Combinao de Mtodos: Criar Perguntas Baseadas em Casos Uma pergunta baseada em casos apresenta um pequeno caso e perguntas baseadas na informao disponvel no caso. Perguntas baseadas em casos requerem que os participantes apliquem diferentes fatos ou aspectos de seu conhecimento situaes que eles provavelmente encontraro nos seus locais de trabalho. Perguntas baseadas em caso podem ser verdadeiro/ falso, mltipla escolha ou perguntas abertas. Perguntas abertas iro proporcionar uma melhor ideia do nvel de conhecimento dos participantes e sua capacidade de aplicar conceitos aprendidos durante a formao.
PGINA 4
1. Que evidncia apoia o incio do TARV para esta paciente (historial, exame clnico e/ou dados de laboratrio)? 2. possvel identicar alguma barreira para uma boa adeso ao TARV? Caso seja possvel, como esta(s) barreira(s) pode ser ultrapassada? 3. Que tipo de medicao anti-retroviral deve ser recomendada? 4. Que tipo de reaco pode estar associada com a medicao anti-retroviral escolhida?
As perguntas baseadas em caso tm uma pergunta principal e possveis respostas (ou espao para respostas). O caso no deve fornecer a resposta facilmente, e quando utilizar mltipla escolha, a resposta correcta tambm no deve ser bvia entre as outras possveis opes.
Os pr e ps-testes podem no ser as melhores ferramentas de avaliao para todas as formaes, como seminrios de apenas um dia de durao ou formaes focalizadas em capacidades que precisam ser observadas.
PGINA 5
Validao do Pr e Ps-Teste
Todos os pr e ps-testes devem ser validados antes de serem considerados uma ferramenta convel de recolha de dados. Se os participantes erram uma pergunta, isto deve acontecer por falta de conhecimento acerca do contedo, no por entender a pergunta de maneira incorrecta. Isto pode acontecer quando a pergunta no foi correctamente formulada e tem mais de
uma resposta correcta, ou quando o contedo no foi ensinado durante a formao. Quando o participante acerta a resposta, isso deve ser o resultado do conhecimento que ele/ela tem sobre o contedo e no porque as respostas incorrectas eram to bvias que foi fcil adivinhar a resposta correcta. Como primeiro passo no processo de validao, pea a quatro integrantes da equipa local para fazerem o
PGINA 6
teste. Pea a eles para marcar qualquer pergunta que no for clara. Discuta as respostas com a equipa, assegure-se que tenham entendido correctamente todas as perguntas. Ainda que esta equipa possa no ser representativa dos participantes que faro o teste, este um bom primeiro passo para esclarecer perguntas e respostas antes de realizar o teste com o grupo de participantes. Se necessrio, modique as questes com base nos resultados do pr-teste com a equipa antes de realizar o teste com os participantes O passo mais importante do processo de validao acontece com os prprios participantes. Depois de realizar o ps-teste com participantes da formao, revise as respostas com o grupo. Pea aos participantes para explicar suas respostas, para entender melhor como eles interpretaram cada uma das perguntas. A discusso deve esclarecer quais perguntas foram confusas para os participantes e quais foram bem escritas. Para as perguntas que foram respondidas incorrectamente, a discusso tambm deve ajudar a determinar se a pergunta no foi clara mas os participantes entendem o conceito que est a ser testado ou, se por alguma razo, os participantes no aprenderam o contedo. Reescreva o teste baseado na retro-informao e realize o teste com outro grupo de participantes para ter a certeza de que os ajustes esclarecem qualquer dvida relativa s perguntas.
Realizar o pr-teste antes de iniciar a formao. Distribua os pr-testes aos participantes e pea a eles que anotem seus nmeros onde est indicado o nmero do cdigo Explique aos participantes que . suas respostas so annimas - no sabemos qual nmero cada um deles pegou. Explique que o objectivo do pr e ps-teste avaliar a formao e responder a seguinte pergunta, Os participantes aprenderam aquilo que gostaramos que eles tivessem aprendido? Pea aos participantes para responder as perguntas do pr-teste. Eles podem pedir esclarecimento para perguntas que no entendam, se por exemplo h alguma palavra que no faz sentido para eles ou ambgua. O facilitador deve anotar todas as perguntas ou esclarecimentos em sua prpria cpia do teste, para que o teste possa ser aperfeioado para a prxima formao. Quando os participantes terminarem o teste, recolhaos e inicie a formao. Realizar o ps-teste ao nal da formao. Distribua os ps-testes e pea aos participantes para escreverem seus nmeros no topo da pgina. Relembre que os facilitadores desconhecem os nmeros de cada participante, mas que importante que o mesmo cdigo seja utilizado em ambos os pr e ps-testes, para que os facilitadores possam avaliar o que funcionou e o que no deu certo durante a formao. Pea aos participantes para responder as perguntas do ps-teste. De novo, as pessoas devem sentir-se vontade para esclarecer qualquer dvida na linguagem ou na interpretao das perguntas. O facilitador deve anotar todas as perguntas ou esclarecimentos na sua prpria cpia do teste. Quando os participantes terminarem, recolha os ps-testes e repasse-los equipa que conduz a formao. Discuta as perguntas e respostas do teste com os participantes. Para ambos propsitos, de ensino e avaliao, importante revisar as respostas correctas do ps-teste com os participantes. Revisar as respostas em grupo fornece retro-informao imediata aos participantes acerca de conceitos que no foram bem compreendidos e fortalece a aprendizagem da informao correcta. Isto tambm ajuda a esclarecer conceitos errados, antes que eles sejam institucionalizados atravs da prtica. Por ltimo, revisar as respostas durante a formao fornece aos facilitadores uma importante retro-informao em conceitos que ainda no esto claros para os participantes, e ajuda a identicar as reas do currculo que necessitam de adaptao.
Implementao de um Pr e Ps-Teste
Uma vez que o teste tenha sido validado, estar pronto para comear a ser utilizado como um mtodo de recolha de dados sobre a formao. A forma mais efectiva de utilizar este mtodo emparelhar as respostas do pr-teste com as respostas do ps-teste de cada participante, e analisar a variao do conhecimento de cada um, assim como do grupo em geral. Como os participantes podem no sentir-se confortveis ao escrever seu nome nos testes, utilize nmeros em vez de nomes para identic-los. Os tpicos abaixo so instrues para realizar pr e ps-testes annimos. Atribuir nmeros de forma aleatria a cada participante. Escreva nmeros de 1 a X (X igual ao nmero de participantes da formao) em pedaos de papel. Pea aos participantes para escolherem um pedao de papel e escreverem o nmero que pegaram na primeira pgina no Manual do Participante ou outro material recebido.
PGINA 7
Certique-se de incluir tempo para os pr e ps-testes e para a discusso dos resultados na agenda da formao. Os participantes devem encarar a discusso dos resultados dos testes como parte da formao, no como uma actividade opcional que acontece depois da formao.
conhecimento. Lembre-se que a falta de variao no conhecimento pode indicar, tanto uma pergunta mal formulada quanto uma fraqueza no currculo. Se as notas dos pr-testes forem muito altas, haver pouco espao no ps-teste para medir o conhecimento adquirido. Se houver perguntas que muitos participantes erraram, tanto no pr como no ps-teste, considere ajustes no currculo para fortalecer contedos fracos ou poucos claros. Revise toda a informao para assegurar que nenhum elemento foi ignorado e registe qualquer informao relevante. Utilize os resultados para fazer adaptaes necessrias na formao.
Lista de Recursos 1. Based on Developing Multiple Choice Questions for the Royal College of Physicians and Surgeons of Canada Certi cation Examinations, T. Wood & G. Cole, Educational Research and Development, June 2004. p. 4. Can be found online at: www.ranzcog.edu.au/fellows/ pdfs/diploma-mcqs/developing-mcqs-for-RCPSC.pdf.
PGINA 8
Agradecimentos
Financiamento Este documentos foi desenvolvido atravs do nanciamento do Acordo Cooperativo U69HA00047 do U.S. Department of Health and Human Services Health Resources and Services Agency (HRSA); o contedo deste material de responsabilidade dos autores e no necessariamente representa a viso da HRSA. Acerca da I-TECH A I-TECH, uma colaborao entre a Universidade de Washington e a Universidade da Califrnia, So Francisco, um programa de formao global sobre SIDA que trabalha a convite dos Ministrios da Sade e do governo dos Estados Unidos para aumentar a capacidade de prossionais e instituies na preveno, cuidados e tratamento da SIDA em pases fortemente atingidos pela epidemia. A I-TECH foi fundada em 2002 pela HRSA em colaborao com CDC (Centers for Disease Control and Prevention). I-TECH Estados Unidos 901 Boren Avenue, Suite 1100 Seattle, Washington 98104 USA www.go2itech.org
2008 University of Washington. Favor pedir a permisso da I-TECH antes de reproduzir, adaptar ou extrair partes deste manual.