“Lâmpada para os meus pés é a Tua Palavra e luz para o meu caminho” Salmo 119:105 Profa. Dra. Kátia Sgrillo (Lei 10.861) 1. A Missão e o Plano de Desenvolvimento Institucional 2. O Ensino (Graduação e Pós-graduação), a Pesquisa e a Extensão 3. Responsabilidade Social 4. Comunicação com a sociedade 5. Pessoal 6. Organização e Gestão da Instituição 7. Infra-estrutura 8. Planejamento e Avaliação 9. Atendimento aos Egressos 10. Sustentabilidade Financeira - UNIVERSIDADE METODISTA DE PIRACICABA (está sendo re-estruturado, ainda não aprovado) O que o MEC / Conaes pergunta? Instrumentos para coleta: •Tabelas Professores •Questionários Alunos •Entrevistas •Grupos focais Funcionários Comunidade externa (Incluindo egressos) Que dados devem ser coletados para suportar as respostas? Que análise e crítica dos dados devem ser feitas para responder ao MEC/Conaes? Relatório Sistema de Auto-Avaliação, em MSAccess®, que conterá as informações institucionais necessárias para Avaliação Institucional. Para cada dimensão apontada no Roteiro de Auto-Avaliação Institucional 2004 (SINAES) foram construídas tabelas (total de 110 Tabelas) para coleta de dados disponíveis em documentos (Plano de Desenvolvimento Institucional, Projeto Pedagógico Institucional, Projetos Pedagógicos de Cursos, etc.) ou em bases de dados (Sistema Acadêmico, entre outros.) São compostos por grupos de perguntas visando avaliar a opinião de cada classe que compõe a comunidade acadêmica da UNIMEP nos diversos aspectos da avaliação institucional de acordo com o Roteiro de Auto-avaliação Institucional do SINAES. Foram construídos 4 grupos de questionários, cada um destinado a um público específico: docentes, discentes, funcionários e comunidade civil organizada (incluindo egressos e locais onde trabalham). Os Questionários desenvolvidos pela CPA são direcionados a: Professores, Alunos, Funcionários e Comunidade Civil Organizada. Estão informatizados como uma parte dentro do Sistema Informatizado de Avaliação Institucional, chamada de Questionários. 1. nunca/insuficiente 2. raramente/regular 3.as vezes/médio 4. quase sempre/bom 5. sempre/excelente Exemplo de perguntas do Sub-Sistema-Questionários, no formulário de professores na Dimensão Infra-estrutura. Será adotado o critério de amostragem: 2 2 Z * p*q …1 n 2 e Z2 * p*q* N n 2 e * N 1 Z 2 * p * q população indefinida …2 população definida Onde: Z = abscissa da curva normal padrão fixado um nível de confiança; p = estimativa da verdadeira proporção de um dos níveis da variável escolhida; q = 1 – p; N = tamanho da população; e = erro amostral, que e a diferença admitida entre a verdadeira população e a proporção calculada a partir da amostra. Z = 1,96 (nível de confiança de 95%) p = 0,7 (70% dos alunos satisfeitos com a IES) q = 1 – 0,7 = 0,3 (30% dos alunos insatisfeitos com a IES) N = 1600 alunos na IES e = 5% = 0,05 Portanto, utilizando a equação 2, tem-se: 1,962 * 0,7 * 0,3 *1600 n 270 alunos 2 2 0,05 * 1600 1 1,96 * 0,7 * 0.3 Logo é preciso entrevistar uma amostra de 270 alunos para representar o grau de satisfação dos 1600 alunos da instituição, considerando um nível de confiança de 95%. Contador do Sub-Sistema-Questionários. Indica quantas pessoas responderam cada um dos Questionários específicos (Alunos, Funcionários, Professores e Comunidade Civil Organizada). Dirigentes (setores específicos) Coordenadores de Cursos Professores Representates de alunos Durante o período de coleta de dados diversas entrevistas serão realizadas com objetivo de complementar a coleta de dados. Também serão realizadas reuniões envolvendo grupos específicos para tratar de temas específicos (ex.: matriz curricular). – A) Formulário de entrada no Sub-Sistema Ensino. Opção para selecionar curso e senha, alterar senha, efetuar busca no Sub-Sistema Ensino. B) Formulário principal do Sub-Sistema Ensino. Faça uma UNIMEP melhor !!! Formulário do Sub-SistemaENSINO, referente ao Cadastro de Cursos de Graduação. Ano A) Formulário do Sub-Sistema-ENSINO referente a Cadastro de Disciplina de Graduação, B) Formulário do Sub-Sistema-ENSINO referente a Cadastro de Disciplina de Pós-Graduação. Sistema Ensino – Seleção de disciplina por curso indicando o nome dos professores, o turno e o semestre em que são oferecidas as disciplinas (dados fictícios). Os dados obtidos através dos questionários e do preenchimento das tabelas serão a base para análise quantitativa e qualitativa. Inicialmente os dados serão organizados numa base de dados relacional desenvolvida para este fim. Formulário principal do Sistema – Análise de Questionários Os dados numéricos, obtidos a partir dos questionários destinados a alunos, professores, funcionários e a comunidade, serão analisados através de tabelas de freqüências, em que as respostas serão classificadas em classes e contadas. A cada classe será atribuída um peso. mediaquestao (respostasi * peso) mediaquesito totalrespostas mediaquestao nquestao …3 …4 Notas Índice 1 Nunca/insuficiente (I) 2 Raramente/regular (II) 3 As vezes/médio (III) 4 Quase sempre/bom (IV) 5 Sempre/excelente (V) Os valores obtidos com as equações 3 e 4 variarão entre 1 (pior situação onde toda a população estudada está insatisfeita com aquele quesito) e 5 (melhor situação onde toda a população está satisfeita – classificando como excelente aquele quesito). Notas com valores intermediários (próximos a 3) indicam uma satisfação intermediária da população em estudo, quanto aquele quesito. No da Questão Infra-estrutura No de respostas Valor médio (equação 3) I II III IV V insuficiente regular médio bom ótimo 1 7 5 20 38 5 3,4 2 5 10 42 8 10 3,1 3 45 0 17 10 3 2,0 4 15 20 10 15 15 2,9 Total de questionários: Valor total da dimensão (média- equação 4): 75 alunos 2,9 Este resultado significa que de modo geral os alunos tem uma satisfação média quanto ao quesito “infra-estrutura”. A pergunta número 3 obteve uma menor valoração devendo ser a prioridade para correção (ajuste). Já as perguntas 2 e 4 estão apresentando valores médios (3,1 e 2,9 respectivamente) e a pergunta 1 representa uma maior satisfação do alunado. Formulário do Sub-Sistema Análise que permite a obtenção de respostas resumidas (média por perguntas, desvio padrão e coeficiente de variação), média da Dimensão e total de respostas por dimensão em cada categoria. Relação de perguntas por dimensão. A partir destas informações deverão ser consideradas as anotações em cada questão (observações e queixas). Também deverá ser realizada a análise de freqüência das principais queixas apontadas e a partir daí, analisar em cada quesito os principais pontos de estrangulamento e que precisam ser trabalhados na UNIMEP. Esta análise será mais de cunho qualitativo. Esta análise deverá ocorrer tanto do ponto de vista do aluno, como do professor, do funcionário e da comunidade (para alguns quesitos, conforme explicitado nos questionários correspondentes em anexo). Para cada quesito será obtida uma nota individual (por tipo de questionário – alunos, professores, funcionários e comunidade) e uma geral (considerando todas os questionários). As médias serão apresentadas com os respectivos intervalos de confiança, estimados a partir da variância* da amostragem, calculada pela equação 5. s2 2 Y Y i n 1 …5 * variância é o quadrado médio dos desvios, isto é, a soma dos quadrados dividida pelo número de observações n do grupo menos uma. O símbolo usado para variância e s2. Exemplo (fase piloto) de comentários obtidos nas perguntas dos Questionários. Sub-Sistema Análise Questionários. Exemplo de análise gráfica obtida a partir de dados obtidos com o SubSistema Análise Ensino. Avalia a evolução no número de cursos autorizados pelo MEC ao longo do tempo. Também será utilizada, para complementar as discussões e conclusões. Por exemplo, serão construídos gráficos de barra para avaliar a evolução do número de cursos oferecidos pela UNIMEP. Outros gráficos que serão construídos referem-se a proporção entre o número de alunos matriculados e a evasão por curso; o número de salas disponíveis por curso; o número de alunos por turma; o número de laboratórios por curso; etc., podendo variar o tipo de gráfico (pizza, barras, linhas, etc.) escolhendose aquele que melhor visualize o parâmetro em estudo. Para que se possa adotar medidas corretivas na Instituição, estes dados (na forma de gráficos) não poderão ser utilizados de forma isolada e sim de forma holística. Isto é, será necessário avaliar a influência relativa de parâmetros específicos neste sistema que tem gerado estas respostas. Exemplo de análise gráfica gerada a partir de dados fictícios no Sub-Sistema Analise Ensino. Considera a História do Curso ao longo do tempo, avaliando o número de ingressos, trancamentos, desistências, transferência e formandos Exemplo de análise gráfica, gerada a partir de dados fictícios no Sub-Sistema Análise. Considera a Missão Institucional, avaliando a percentagem da população estudada que desconhece a Missão, e que declara conhecer a missão (e coincide com a explicitada no PDI) e ainda aqueles que declaram conhecer a missão mas esta diverge da explicitada no PDI. Titulação do Corpo Docente 17% 2% 7% 1 Doutores 2 Mestres 3 Especialistas 4 Graduados 74% A análise deverá ter por princípio a comparação com o PDI (Políticas Institucionais) da UNIMEP e a utilização da seguinte Critérios Descrição tabela: Insuficiente não foi implantado ou não coincide com o PDI (Política correspondente). Regular foi implantado mais diverge, de forma negativa, grandemente do PDI (Política correspondente). Médio foi implantado recentemente, ainda sem resultados demonstrados Bom foi implantado a um certo tempo, podendo melhorar devido ao seu potencial. Ótimo foi implantado, coincide fortemente com o PDI ou não era previsto no PDI (Política correspondente), mas apresenta excelentes resultados. Complementarmente serão calculados índices específicos, tais como índice de formação, índice de retenção e índice de evasão, usados para avaliar a evolução do alunado em cada curso de graduação e pósgraduação oferecido pela UNIMEP. form ação retenção evasão form andos *100 ingressos …6 ingressos trancam entos desistências transferências form andos *100 ingressos trancam entos desistências tranferências *100 ingressos …8 …7