Instrumentos de avaliação e metodologia
Acreditação • Acreditação: reconhecimento formal da qualidade de serviços oferecidos por uma instituição, baseado em avaliação padronizada por um organismo independente à instituição, comprovando que esta atende a requisitos previamente definidos e que tem competência para realizar seu papel de modo eficaz e seguro. • Significa outorgar a uma organização um certificado de avaliação que expressa a conformidade com um conjunto de requisitos previamente estabelecidos. Deve ser renovado periodicamente.
Já temos experiência em avaliação de Cursos de Medicina • Centenas de professores de medicina participaram de diversas fases do SINAES. • Propôs-se um instrumento completo de avaliação dos cursos de medicina ao INEP (2005-2006). • Projeto de avaliação e acompanhamento das mudanças nos cursos de graduação da área da saúde CAEM/ABEM. • Comissão de avaliação de cursos de medicina presidida pelo Prof. Adib Jatene.
Projeto CINAEM • Projeto Pedagógico • Desenvolvimento Docente • Gestão do Curso • Infra-estrutura e Cenários de EnsinoAprendizagem
• Avaliação
Análise do SINAES • Propósitos regulatórios primordialmente. • Alternância entre instrumentos específicos e gerais. • Mudanças frequentes dos instrumentos. • Impossibilidade atual regulação das públicas estaduais. • Dificuldades na regularidade das ações, comissões só com médicos e dificuldades na monitorização das mudanças. • Dificuldades de manter suas decisões no CNE.
• Só houve um momento na última década em que vagas foram reduzidas, com a Comissão do Prof. Adib Jatene.
PAEM – primeira fase – 2012-2013
Traduz-se pela.... ...validação da qualidade de processos instalados, registrados e compartilhados na organização, em conformidade com indicadores previamente definidos...
Indicadores referenciados em quĂŞ?
Indicadores de Excelência (evidências) • Ensino em grupos pequenos e trabalho em equipe. • Aprendizagem no trabalho. • Ensino de competências gerais. • Avaliação de conhecimento, habilidades e atitudes com feedback permanente. • Tutoria/coaching/mentorship.
Indicadores de Excelência • • • • • •
Segurança dos pacientes. Inserção no serviço desde o início do curso. Inserção em todos os níveis de assistência. Ensino integrado. Formação em habilidades de comunicação. Formação em ética, profissionalismo, humanismo e responsabilidade social. • Tempo pró estudo e conquista de autonomia.
Indicadores de Excelência • Foco em competências e desempenhos técnico e socialmente relevantes. • Práticas baseadas em Evidências. • Ter a prática como orientadora da aprendizagem. • Emprego de metodologias ativas e problematizadoras. • Dar suporte e qualidade de vida aos estudantes.
Modelos/referências consideradas na construção do instrumento • SINAES. • Arcu-Sur (Mercosul). • Liaison Committee on Medical Education (EUA e Canadá) • General Medical Council (Reino Unido). • Australian Medical Council (Austrália). • Accreditation Organization of the Netherlands (Holanda) • National Institution for Academic Degree University Evaluation (Japão). • União Europeia (Bolonha).
SINAES
LCME
NIAD
AMC
NVAO
LCME
ARCU-SUL
GMC
Bologna Process
PAEM – Instrumento de Avaliação de Cursos de Medicina • A primeira versão do Instrumento de Avaliação de Cursos de Graduação de Medicina traz cinco dimensões: Gestão Educacional, Programa Educacional, Corpo Docente, Corpo Discente e Ambiente Educacional. • Cada dimensão tem indicadores que resultam em conceitos de suficiente e insuficiente, exigindo da instituição avaliada uma ampla discussão junto ao seu corpo social e a apresentação de evidências. • Após o preenchimento do instrumento, ocorre uma visita por comissão de avaliadores e posterior devolutiva para a instituição.
PAEM – segunda fase - 2014
PAEM – segunda fase - 2014 • Criou-se um roteiro para avaliação/acreditação de cursos de medicina, a partir do instrumento do MEC/INEP e dos instrumentos e diretrizes internacionais estudados. • Elaborou-se um roteiro para preenchimento, visita de avaliação e devolutiva. • Desenvolveu-se uma plataforma eletrônica para o preenchimento do instrumento e apresentação dos documentos necessários. • Realizou-se um piloto do processo em oito cursos de medicina brasileiros.
Distribuição dos conceitos nas cinco dimensões avaliadas 10
Insuficiências Suficiente Excelente
Número de indicadores
8
6
4
2
0
Gestão
Programa
Docente
Discente Infraestrutura
Acreditação CFM-ABEM • O projeto prevê que o sistema de acreditação CFMABEM esteja totalmente implantado em três anos.
• No primeiro ano está em desenvolvimento a fase inicial, de avaliação e acreditação de 20 cursos de Medicina (inscreveram-se, de fato, 31 cursos).
• Nos dois anos seguintes o processo de acreditação será progressivamente implantado.
CFM-ABEM Saeme • A coordenação é feita por uma comissão de representantes das duas entidades. • Independente dos Governos Federal, Estadual e Municipal.
• A participação dos cursos de Medicina é voluntária. • Com o tempo, espera-se conquistar credibilidade entre os cursos de Medicina e na sociedade, passando a ser fundamental, para um curso de Medicina ser socialmente reconhecido, ter a acreditação CFM-ABEM.
Acreditação de Cursos de Medicina • Considerando a proposta central do Saeme, um curso de Medicina será acreditado pelo CFM e ABEM quando demonstrar que possui os requisitos necessários para a formação de médicos de acordo com o estabelecido por estas entidades.
Características Gerais Específico para cursos de Medicina. Voluntário. Não classificatório. Focado na autoavaliação. Validado por uma equipe de avaliação externa. Acreditado por uma comissão de acreditação.
Proposta da OMS/Federação Mundial de Escolas Médicas O comitê central de avaliação deve ter constituição heterogênea, composto por um terço de professores de escolas médicas, um terço de profissionais indicados pelas associações médicas e um terço de representantes de órgãos governamentais, de estudantes e da sociedade.
Equipe de avaliação externa
• Coordenador da equipe de avaliação externa. • Avaliador médico. • Avaliador não médico. • Estudante avaliador.
Metodologia Roteiro
Inscrição
Autoavaliação
Avaliação Externa 60 dias
• Preenchimento on line inscrição. • Validação da inscrição e envio do Login (3 dias).
• Esforço coletivo IES. • Inserção das evidencias na plataforma (60 dias). • Definição data(2 dias) • Aprovação da equipe (15 dias).
Avaliação Externa
Avaliação Externa
Avaliação Externa
• Análise da Autoavaliação e evidencias pelos avaliadores (30 dias). • Visita local pela equipe de avaliadores externos ( 3 dias). • Elaboração do Relatório da visita, considerando análise documental e dados complementares (10 dias).
Emissão do Parecer Final 57 dias
Emissão do Parecer Final 57 dias
Emissão do Parecer Final 57 dias
• Emissão do parecer final pela equipe de acreditadores (30 dias). • Solicitação de Revisão do parecer emitido (20 dias). • Publicação e comunicação do parecer final (7 dias).
Análise da Comissão de Acreditação e Parecer Final
Devolutiva do processo com detalhamento de cada dimensão
Saeme CFM-ABEM – Metas Paralelas. • Criar um repositório nacional de boas práticas e áreas de excelência dos cursos avaliados e divulgar. • Criar uma rede de colaboração entre as diversas instituições de ensino, para que haja um aperfeiçoamento sistêmico e global dos cursos de medicina participantes do Saeme. Estamos seguindo as diretrizes da World Federation of Medical Education para que o Saeme seja reconhecido pela WFME.
Uma escola não acreditada…… Não siginifica necessariamente que não seja uma boa escola…. • Significa que, no momento da inscrição para a avaliação, não foi capaz de oferecer evidências dos processos implantados com qualidade …… • Ou que, não esteja em conformidade com os indicadores do sistema……
Não conflita com nenhum outro sistema de avaliação em curso • SINAES: processo com ênfase na regulação (autorização, reconhecimento e renovação de reconhecimento) e condições de oferta de cursos. • Projeto CAEM – da ABEM: processo marcadamente Diagnóstico. • Mercosur: busca do Mínimo Múltiplo Comum entre nações, visando a mobilidade estudantil no Cone Sul. • Anasem: Avaliação Nacional Seriada Estudantes de Medicina – Habilitação. Porquê enfatiza a qualidade e as melhores práticas.
No que o Saeme se distingue? • Indicadores e Cinco dimensões. • Governança. • Processo emancipatório, dialógico, em busca de boas práticas, excelência e desenvolvimento sistêmico. • Inclusão de estudantes e não médicos no grupo de avaliação. • Independência e transparência.
Tem por visão ser o sistema não governamental, independente e nacional, de acreditação da qualidade do ensino médico no país.
The Liaison Committee on Medical Education is recognized by the U.S. Department of Education as the reliable authority for the accreditation of medical education programs leading to the MD degree.
Necessidade de acreditação da escola médica para o requerimento para a certificação pelo ECFMG. • O ECFMG anunciou que, a partir de 2023, os médicos que se inscreverem para obter a certificação do ECGMG terão que ter se graduado em uma escola médica que foi acreditada. • Para isso o Sistema Nacional deve utilizar critérios comparáveis aos estabelecidos para as escolas médicas americanas pelo Liaison Committee on Medical Education. • Necessidade da meta-acreditação.
Metaacreditação pela WFME Sistema Nacional de Acreditação regulamentado. Comissão de Acreditação com constituição heterogênia (professores de escolas médicas, profissionais, representantes de órgãos governamentais, estudantes e da sociedade). A comissão de avaliação externa deve ser composta por três a cinco membros, sendo pelo menos um professor da área básica. Indicadores de avaliação claros e pactuados com a sociedade e comunidade acadêmica (consulta pública). Resultado final do processo é público.
Valores • • • • •
Qualidade . Ética. Transparência. Independência. Responsabilidade Social.