ç
2014/2015
Relatório Autoavaliação Relatório dede Autoavaliação dada Biblioteca Escolar - ESSPS Biblioteca Escolar - ESSPS
Professora Cristina Oliveira Equipa da Biblioteca da Escola Secundária Agrupamento de Escolas de S. Pedro do Sul 2014/2015
1 Relatório de Autoavaliação da Biblioteca Escolar - ESSPS
Índice
INTRODUÇÃO .......................................................................................................................... 6 METODOLOGIA ........................................................................................................................ 8 APRESENTAÇÃO E ANÁLISE DOS RESULTADOS .......................................................................... 9 1. Caracterização da amostra .................................................................................................................. 9 2. Frequência e utilização da Biblioteca ................................................................................................ 12 3. Grau de satisfação quanto às instalações/equipamentos ................................................................. 17 4. Grau de satisfação quanto aos recursos............................................................................................ 21 5. Grau de satisfação quanto à atuação do Assistente Operacional e dos Professores da equipa da BE .............................................................................................................................................................. 24 6. Grau de satisfação quanto às atividades desenvolvida pela BE ......................................................... 25 7. Avaliação global dos serviços prestados pela Biblioteca Escolar ....................................................... 27
SUGESTÕES DE MELHORIA APRESENTADAS PELOS ALUNOS .................................................... 29 1. Alunos do Ensino Básico (8º e 9º anos) ............................................................................................. 29 2. Alunos do Ensino Secundário ............................................................................................................ 31
PONTOS A NECESSITAREM DE MAIS ATENÇÃO........................................................................ 33 CONCLUSÃO .......................................................................................................................... 36
2 Relatório de Autoavaliação da Biblioteca Escolar - ESSPS
ÍNDICE DE TABELAS Tabela 1 - Caracterização da amostra segundo o género ......................................................... 10 Tabela 2 - Nível de escolaridade do pai e da mãe dos alunos que constituem a amostra .......... 11 Tabela 3 Frequência da Biblioteca pelos alunos que constituem a amostra ............................. 12 Tabela 4 - Teste Qui-quadrado (relação entre o ano de escolaridade frequentado e o nível de frequência da BE)................................................................................................................... 13 Tabela 5- Teste K-S (relação entre o género do aluno e a frequência da BE) ............................. 14 Tabela 6 - Utilização dada à BE ............................................................................................... 15 Tabela 7 - Grau de satisfação com as instalações e equipamentos ........................................... 17 Tabela 8 - Grau de satisfação com as Instalações / Equipamentos, segundo uma escala de 1 a 5 ............................................................................................................................................. 19 Tabela 9 - Relação verificada entre as variáveis género, ano de escolaridade e curso frequentado e o grau de satisfação face ao vários parâmetros ................................................ 20 Tabela 10- Grau de satisfação dos alunos quanto aos recursos da BE ...................................... 21 Tabela 11 - Grau de satisfação dos Recursos - média, variante e moda .................................... 22 Tabela 12 - Relação entre as variáveis Género, ano de escolaridade e curso frequentado e o grau de satisfação face a cada parâmetro ............................................................................... 23 Tabela 13 - Grau de satisfação dos alunos quanto à atuação da equipa da BE (média e moda) . 24 Tabela 14 - Resultado da significância do Teste K-S: grau de satisfação face à atuação dos membros da equipa da BE e o género .................................................................................... 24 Tabela 15 Grau de satisfação dos alunos quanto às atividades desenvolvidas pela BE, por frequência absoluta e frequência relativa ............................................................................... 25 Tabela 16 - Grau de satisfação dos alunos face às atividades desenvolvidas pela BE (média, mediana e moda) ................................................................................................................... 26 Tabela 17 - Avaliação Global da BE ......................................................................................... 27 Tabela 18 Sugestões de melhoria (alunos do 8º e 9º anos) ...................................................... 29 Tabela 19 Sugestões de melhoria - Ensino Secundário............................................................. 31
3 Relatório de Autoavaliação da Biblioteca Escolar - ESSPS
ÍNDICE DE GRÁFICOS Gráfico 1 - Distribuição da amostra segundo a idade ................................................................. 9 Gráfico 2 - caracterização da amostra segundo o ciclo/curso frequentado ............................... 10 Gráfico 3 - Distribuição da amostra segundo o ano de escolaridade frequentado .................... 10 Gráfico 4 - Nível de frequência da BE segundo o ano de escolaridade frequentado .................. 13 Gráfico 5 - Frequência da BE segundo o género ...................................................................... 14 Gráfico 6 - Conhecimento da existência do Guia do Utilizador da BE........................................ 16 Gráfico 7 - Avaliação Global da BE .......................................................................................... 27 Gráfico 8 - Sugestões de melhoria mais relevantes - 8º e 9º anos (%) ...................................... 30 Gráfico 9 - Sugestões mais significativas dos alunos do Ensino Secundário (%) ........................ 32
4 Relatório de Autoavaliação da Biblioteca Escolar - ESSPS
SIGLAS AI
Avaliação Interna
AESPS
Agrupamento de Escolas de S. Pedro do Sul
BE
Biblioteca Escolar
ESSPS
Escola Secundária de S. Pedro do Sul
IQ
Inquérito por questionário
RBE
Rede de Bibliotecas Escolares
5 Relatório de Autoavaliação da Biblioteca Escolar - ESSPS
INTRODUÇÃO
Todos os anos, durante o 3º período, a Rede de Bibliotecas Escolares (RBE) disponibiliza a todos agrupamentos de escolas/escolas não agrupadas, com Biblioteca Escolar (BE), um conjunto de instrumentos de avaliação. Estes instrumentos, inquéritos por questionário, são aplicados a uma amostra constituída por 20% de alunos, de professores e de encarregados de educação, competindo à equipa da BE contar os dados e inseri-los na base da RBE. O tratamento da informação é feito pela RBE. O procedimento descrito inibe as BE de tratar a informação, de cruzar variáveis e de interpretar os resultados obtidos. Deste modo, a equipa da BE da Escola Secundária de S. Pedro do Sul, escola sede do Agrupamento de Escolas de S. Pedro do Sul, decidiu avançar com um procedimento autónomo que lhe permitisse a autoavaliação do serviço que esta estrutura presta. Os objetivos subjacentes a este estudo são: . Saber se as características dos alunos, trabalhadas neste estudo, influenciam a frequência e a utilização da BE; . Conhecer o grau de satisfação dos alunos nas dimensões: instalações/equipamentos, recursos da BE, tratamento pela equipa da BE e atividades desenvolvidas pela BE; . Dar oportunidade ao aluno de contribuir para o melhoramento dos serviços da BE, através de apresentação de sugestões. Como instrumento de investigação utilizámos o inquérito por questionário, aplicado a uma amostra representativa do universo a estudar - alunos que frequentam a Escola Secundária. Desta forma, ficaram de fora os alunos da Escola Básica nº 2 (2º Ciclo e 7º ano) e os da Escola Básica nº 1 Centro Escolar), alunos estes que dispõem de BE nas instalações que frequentam. O presente trabalho encontra-se organizado em 5 partes. Na primeira apresenta-se a metodologia utilizada, debruçando-se a segunda parte sobre a caracterização da amostra de acordo com as variáveis convocadas para a análise (variáveis independentes) e sobre a influência destas na frequência e tipo de utilização da BE. Na terceira parte analisa-se o grau de satisfação dos alunos com as dimensões instalações/equipamentos, recursos, atendimento pela equipa da BE e atividades desenvolvidas pela BE. A quarta parte fica reservada às considerações dos alunos quanto aos aspetos a melhorar.
6 Relatório de Autoavaliação da Biblioteca Escolar - ESSPS
Na quinta procedemos à apresentação de melhorias que a análise dos resultados suscita. A sexta parte é constituída pela conclusão. Neste estudo não levámos em consideração a atitude dos professores face à BE devido essencialmente a questões metodológicas e ao período de tempo necessário à analise e interpretação da informação.
7 Relatório de Autoavaliação da Biblioteca Escolar - ESSPS
METODOLOGIA
O foco de estudo do presente trabalho centra-se na Escola Secundária de S. Pedro do Sul, sede do Agrupamento de Escolas de S. Pedro do Sul e, dentro daquela, num grupo específico: os alunos que a frequentam no ano letivo 2014/2015. O universo é constituído por 625 alunos a frequentar os 8º e 9º anos e o ensino secundário. Como anteriormente referido o 7º ano de escolaridade não foi considerado neste estudo porque frequentam a Escola Básica nº 2, utilizando a BE desta escola. A amostra é constituída por 238 alunos. O processo de amostragem utilizado foi a amostragem aleatória sistemática para uma margem de erro de 5% e um nível de confiança de 95%. Assim, partimos de uma lista da população que constitui o nosso universo (lista dos alunos que frequentam a ESSPS, começando na turma 8ºA e terminando na turma 12ºE) não se definindo estratos ou quotas que estejam relacionadas com o objetivo do estudo. A seleção da amostra fez-se dividindo o total de alunos do universo considerado pelo total da amostra que correspondesse à margem de erro e nível de confiança definidos. O rácio obtido, K , foi 3 .É este K que nos irá permitir definir, a partir da lista ordenada, quais os alunos que irão ser inquiridos. O questionário é anónimo. A elaboração do questionário teve por base a identificação de quatro dimensões sobre as quais pretendemos obter informação: caracterização dos alunos; frequência e utilização da BE; grau de satisfação com instalações/equipamentos, com recursos, com atendimento pela equipa da BE e com atividades desenvolvidas pela BE; sugestões de melhoria. Algumas questões foram adaptadas de questionários usados na autoavaliação da BE da ESSPS, realizada no ano letivo 2008/2009. O questionário é constituído essencialmente por questões fechadas (dicotómicas e escolha múltipla), semifechas (escolha múltipla com uma questão em aberto), abertas e escalas de satisfação e de frequência (Escala de Likert). Foram administrados 238 questionários em sala de aula, por um dos professores da turma, durante a semana de 9 a 13 de Março de 2015. Foram devolvidos 235 questionários. A informação foi tratada através do pograma IBM - SPSS Statistic, versão 20. 8 Relatório de Autoavaliação da Biblioteca Escolar - ESSPS
APRESENTAÇÃO E ANÁLISE DOS RESULTADOS ________________________________________________________ 1. Caracterização da amostra As variáveis tidas em consideração para a caracterização da amostra são: sexo, idade, curso/ciclo frequentado, ano de escolaridade e nível de escolaridade dos pais. A amostra, após a aplicação dos questionários, passou a ser constituída por 235 alunos dos 8º e 9º anos e do ensino secundário com idades compreendidas entre os 13 e os 21 anos, situando-se a média das idades nos 15,7 anos. Gráfico 1 - Distribuição da amostra segundo a idade 60
Nº de alunos
50
52 47
40
42 37
30 20
26
23
10
7
1
19
21
0 13
14
15
16
17
18
Idade
Dos 235 alunos, 51,5% são do género masculino e 48,5% do género feminino (tabela1). Os resultados obtidos na distribuição da amostra por sexo podem causar alguma estranheza dado que no universo considerado há mais alunas do que alunos. Porém, como já referido, a nossa amostra é uma amostra aleatória sistemática.
9 Relatório de Autoavaliação da Biblioteca Escolar - ESSPS
Tabela 1 - Caracterização da amostra segundo o género Género
Nº
%
Masculino
121
51,5
Feminino
114
48,5
235
100,0
Total
No que respeita à situação escolar, o gráfico 2 mostra-nos a distribuição dos alunos que constituem a amostra segundo o ciclo/curso frequentado e o gráfico 3 segundo o ano de escolaridade: Gráfico 2 - caracterização da amostra segundo o ciclo/curso frequentado
Curso Profissional 45 3º Ciclo (8º e 9º): 80
Línguas e Humanidades: 22
Curso Vocacional: 6 Ciências e Tecnologias: 82
Gráfico 3 - Distribuição da amostra segundo o ano de escolaridade frequentado 60
54
47
50
41
39
Nº de alunos
40
54
30 20 10 0 8º
9º
10º
11º
12º
ano de escolaridade
10 Relatório de Autoavaliação da Biblioteca Escolar - ESSPS
Observando, agora, a tabela 2, verificamos que o grau de escolaridade dos pais apresenta-se, no geral, baixo: 62,1% dos pais e 54,9% das mães não possuem mais do que o 9º ano de escolaridade, sendo que uma percentagem não desprezível dos pais não tem mais do que o 4º ano de escolaridade (16,2%) e 43,4% dos pais e 33,2% das mães não detêm mais do que o 6º ano de escolaridade. No que respeita aos restantes níveis de escolaridade destacamos o ensino secundário, seguido, de longe, pela licenciatura. Tabela 2 - Nível de escolaridade do pai e da mãe dos alunos que constituem a amostra
Nível de escolaridade 1º ciclo do ensino básico 2º ciclo do ensino básico 3º ciclo do ensino básico
pai Nº
mãe % acumulada
%
Nº
% acumulada
%
38
16,2
16,2
19
8,1
8,1
64
27,2
43,4
59
25,1
33,2
44
18,7
62,1
51
21,7
54,9
secundário
52
22,1
84,3
73
31,1
86,0
bacharelato
7
3,0
87,2
6
2,6
88,5
licenciatura
17
7,2
94,5
15
6,4
94,9
Mestrado
1
,4
94,9
5
2,1
97,0
Doutoramento
4
1,7
96,6
3
1,3
98,3
"NR/NS"
8
3,4
100,0
4
1,7
100,0
235
100,0
___
235
100,0
___
Total
Com habilitações até ao 9º ano de escolaridade, os pais apresentam uma percentagem acumulada superior à da das mães. A partir deste ciclo de ensino, as mães passam a liderar. Será o abandono precoce a atingir mais os rapazes? Não sabemos. Neste estudo não temos informação que nos permita testar tal hipótese
11 Relatório de Autoavaliação da Biblioteca Escolar - ESSPS
2. Frequência e utilização da Biblioteca Este estudo tem por objetivo conhecer o nível de frequência da BE pelos alunos e quais as motivações que os levam a utilizar este espaço. Para tal, pedimos ao aluno, através de uma questão fechada, que indicasse a frequência com que vai à Biblioteca e, através de uma questão semifechada, os motivos que os levam à Biblioteca. Os resultados obtidos para a primeira questão encontram-se na tabela 3. Tabela 3 Frequência da Biblioteca pelos alunos que constituem a amostra
Nível de frequência
Nº
% acumulada
%
Diariamente
18
7,7
7,7
3 ou mais vezes por semana
25
10,6
18,3
1 ou 2 vezes por semana
58
24,7
43,0
1 ou 2 vezes por mês
37
15,7
58,7
Raramente
65
27,7
86,4
Só em situação de aula
30
12,8
99,1
2
0,9
100,0
235
100,0
____
"NR/NS" Total
Verificamos que 43% dos alunos inquiridos referem utilizar a BE diariamente ou pelo menos 1 ou mais vezes por semana. Porém, se a este 43% adicionarmos os que dizem utilizar a BE 1 ou 2 vezes por mês, obtemos um resultado de 58,7% dos alunos. Ao nível dos que referem utilizar raramente ou apenas em situação de aula, o resultado é 40,5%. Os que não respondem apresentam uma percentagem de 0,9. Se considerarmos apenas cada nível de resposta, a percentagem mais elevada (27,7), regista-se no nível raramente, aparecendo em 2º lugar 1 ou 2 vezes por semana (24,7%) O gráfico 4 permite-nos visualizar o tipo de frequência da BE segundo o ano de escolaridade frequentado pelos alunos que constituem a amostra. Numa primeira análise, verificamos que são os alunos que frequentam os 9º e 10º anos os principais utilizadores da BE. Os alunos que menos frequentam a biblioteca são, por ordem
12 Relatório de Autoavaliação da Biblioteca Escolar - ESSPS
decrescente de frequência, os alunos que frequentam o 11º ano, seguido do 8º ano e, em último o 12º ano.
Gráfico 4 - Nível de frequência da BE segundo o ano de escolaridade frequentado 20
17
Nº de alunos
14
13 12
15
7
7
5 5
2 2 2
3
6
5
13 11 10
12 11
10 10
8º ano
17
6
6
9º ano
13
10º ano 11º ano
6
6
5
4
3
2
12º ano
3
0 Diariamente
3 ou mais vezes por semana
1 ou 2 vezes 1 ou 2 vezes por semana por mês
Raramente
Nunca
Frequência da BE
Porém, para verificarmos a relação que efetivamente se estabelece entre o ano de escolaridade frequentado e o nível de frequência da BE, recorremos à inferência estatística para a análise bivariada através da aplicação do teste Qui-quadrado de Pearson, para uma significância de 5% e um grau de confiança mínimo de 95% Tabela 4 - Teste Qui-quadrado (relação entre o ano de escolaridade frequentado e o nível de frequência da BE)
Valor
Grau de
significância
liberdade Pearson Chi-Square Likelihood Ratio Linear-by-Linear Association N of Valid Cases
a
24
,026
38,358
24
,032
8,202
1
,004
39,197
235
O resultado da significância do teste (2,6%) permite-nos estabelecer uma relação entre as duas variáveis consideradas (o valor do teste é igual ou inferior a 5%), ou seja, podemos inferir para o universo de estudo a relação que se verifica na amostra: a frequência da BE está relacionada com o ano de escolaridade frequentado pelo aluno/a.
13 Relatório de Autoavaliação da Biblioteca Escolar - ESSPS
Gráfico 5 - Frequência da BE segundo o género 35
35 30
23
22
16 9
9
21 15
9
9 0 "NR/NS"
Só em situação de aula
Raramente
1 ou 2 vezes por mês
1 ou 2 vezes por semana
3 ou mais vezes por semana
2 Diariamente
40 35 30 25 20 15 10 5 0
Sexo do aluno Masculino Sexo do aluno Feminino
Com que freqência vai à biblioteca
Da análise do gráfico 5, são as raparigas que mais vão à BE, predominando o género masculino nos que menos frequentam a BE. O género do aluno influenciará a frequência da BE? O resultado obtido para o Teste de Qui-quadrado de Pearson (4,7%) diz-nos que sim, conforme se pode verificar na tabela seguinte: Tabela 5- Teste K-S (relação entre o género do aluno e a frequência da BE)
Chi-Square Tests Value
df
Asymp. Sig. (2-sided)
a
6
,047
Likelihood Ratio
13,706
6
,033
Linear-by-Linear
7,365
1
,007
Pearson Chi-Square
12,755
Association Nº of valid case
235
Continuando com o mesmo tipo de análise, verificamos que a escolaridade do pai ou a da mãe não explica o grau de frequência da BE, sendo o resultado da significância do Teste Quiquadrado de 14,3% e de 58,4%, respetivamente. A utilização da Biblioteca pelos alunos, bem
14 Relatório de Autoavaliação da Biblioteca Escolar - ESSPS
como o grau de satisfação com os recursos/instalações não são explicados pelo nível de escolaridade do pai ou da mãe. Assim, parece-nos que a escola, materializada não apenas na BE mas em todos os seus atores e contextos, tem pela frente um trabalho de valorização da BE e dos resultados advindos desta prática.
Foi solicitado aos alunos que indicassem, por ordem de preferência, três dos motivos que os levam a frequentar a Biblioteca. A tabela nº 4 mostra os resultados obtidos.
Tabela 6 - Utilização dada à BE Tipo de utilização
1ª opção Nº
%
2ª opção Nº
%
3ª opção Nº
%
Estudar
48
20,4
26
11,1
33
14,0
Pesquisar em livros
12
5,1
23
9,8
22
9,4
Pesquisar na Internet
52
22,1
49
20,9
39
16,6
8
3,4
10
4,3
9
3,8
71
30,2
60
25,5
32
13,6
Jogar na Internet
4
1,7
9
3,8
7
3,0
Participar em atividades desenvolvidas pela Biblioteca
8
3,4
7
3,0
8
3,4
Requisitar livros
10
4,3
4
1,7
18
7,7
Outra atividade
1
0,4
0
0,0
1
0,4
21
8,9
47
20,0
65
27,7
Ler Fazer trabalhos
NR/NS
Fazer trabalhos, pesquisar na Internet e estudar, por ordem de preferência, são os principais motivos que levam os alunos à BE, quer seja na primeira opção, quer na segunda, quer, ainda, na terceira, embora com pesos relativos diferentes. Contudo, um número significativo de alunos não respondeu a esta questão ou a resposta não contemplou os 3 tipos de utilização aumentando o peso das não respostas da primeira para a segunda preferência e desta para a terceira opção.
15 Relatório de Autoavaliação da Biblioteca Escolar - ESSPS
Questionados sobre se conheciam o Guia de Utilizador da BE, os resultados obtidos, segundo o género, são:
Conhece o Guia do Utilizador
Gráfico 6 - Conhecimento da existência do Guia do Utilizador da BE
0
NR/NS
5 68 77
Não
Feminino Masculino
46 39
Sim 0
50
100
Quando questionados por que razão não têm conhecimento da existência do Guia de Utilizador, um número significativo de alunos não respondeu e os poucos que responderam limitam-se a referir "porque nunca ouvi falar".
16 Relatório de Autoavaliação da Biblioteca Escolar - ESSPS
3. Grau de satisfação quanto às instalações/equipamentos Para medir o grau de satisfação dos alunos face a determinados domínios da BE, recorremos a questões cuja resposta foi dada numa escala de satisfação ou de Likert, utilizando a seguinte escala de respostas:
1. Mto Insatisfeito 2. Insatisfeito 3. Nem insatisfeito, Nem satisfeito
4. Satisfeito 5. Mto Satisfeito
Começando a análise pelas instalações / equipamentos, apresentamos, na tabela 8, os resultados obtidos para cada parâmetro utilizado: Tabela 7 - Grau de satisfação com as instalações e equipamentos
Grau de satisfação 1 N Horário da Biblioteca
2 %
N
3 %
N
4
5
%
n
%
n
%
NR/ NS
9
3,8
6
2,6
51
21,7
102
43,4
66
28,1
1
6
2,6
3
1,3
35
14,9
122
51,9
68
28,9
1
Comodidade e Conforto Ambiente de trabalho e de estudo Nº de computadores
6
2,6
14
6,0
63
26,8
115
48,9
36
15,3
1
16
6,8
51
21,7
85
36,2
69
29,4
13
5,5
1
Disposição dos recursos
5
2,1
11
4,7
62
26,4
117
49,8
39
16,6
1
Arrumação e disciplina
7
3,0
4
1,7
28
11,9
110
46,8
85
36,2
1
10
4,3
11
4,7
40
17,0
103
43,8
70
29,8
1
Informação utilizadores
aos
A análise da frequência relativa das respostas mostra-nos que, com exceção do parâmetro nº de computadores, o grau de satisfação é positivo, situando-se sempre acima de 60% se considerarmos a percentagem acumulada das respostas para o grau 4 e 5 de satisfação .
17 Relatório de Autoavaliação da Biblioteca Escolar - ESSPS
Observemos, agora, os gráficos que nos apresentam o número de respostas para cada parâmetro:
18 Relatório de Autoavaliação da Biblioteca Escolar - ESSPS
Os quadros permitem-nos ver o nº de respostas a cada parâmetro, contribuindo para uma leitura mais clara do grau de satisfação dos alunos inquiridos sobre recursos/equipamentos.
Outra forma de analisarmos o grau de satisfação registado em cada parâmetro é através da média, mediana e da moda das respostas. por, a análise apresenta-se mais facilitada (tabela 8).
Tabela 8 - Grau de satisfação com as Instalações / Equipamentos, segundo uma escala de 1 a 5
Horário da Biblioteca Média Mediana Moda
3,90 4,00
4
Comodidade/ conforto das instalações 4,04 4,00
4
Ambiente de trabalho e de estudo
Nº de computadores
3,69
3,05
4,00
4
3,00
3
Disposição dos recursos 3,74 4,00
4
Arrumação e disciplina 4,12 4,00
Informação aos utilizadores 3,91 4,00
4
4
A tendência de resposta dos alunos foi, em todos os parâmetros, exceto quanto ao número de computadores, de se sentirem satisfeitos (4) com as instalações e equipamentos, ou seja, a resposta predominante foi 4, exceto para o parâmetro número de computadores cuja moda situou-se no 3. A média das resposta situou-se perto ou acima de 4 - satisfeito, com exceção da média das resposta ao parâmetro nº de computadores que se situou em 3 - nem satisfeito / nem insatisfeito. A merecer maior grau de satisfação são a arrumação e disciplina, parâmetro que apresenta uma média de respostas de 4,1 ("satisfeito"). Os valores apresentados pela mediana1 são de 4 (satisfeito), com a exceção do nº de computadores, o que significa que em todos os parâmetros onde a mediana apresenta o valor 1
A mediana, é uma medida de tendência central da distribuição dos dados, ou seja:: Ordenamos as respostas dos indivíduos da amostra, às questões em análise; a mediana é o valor (pertencente ou não à amostra) que divide ao meio as resposta, isto é, 50% dos elementos da amostra responderam o valor da mediana ou outros de menores que a mediana e os outros 50% deram respostas iguais ou maiores que o valor da mediana.
19 Relatório de Autoavaliação da Biblioteca Escolar - ESSPS
de 4, 50% das respostas são iguais ou inferiores a 4 e os restantes 50% são iguais ou maiores a 4, o que nos permite concluir que 50% dos respondentes mostram-se satisfeitos ou muito satisfeito nos parâmetros abordados, com exceção do nº de computadores onde 50% das respostas vão de muito insatisfeitos até aos nem satisfeito/nem insatisfeito. Procurando verificar, através do Teste Kolmogorov-Sminorv [Teste de K-S), utilizado para analisar a relação entre uma variável dicotómica (género) e escalas de satisfação] e do Teste Qui-quadrado de Pearson, se o género, ano de escolaridade e curso seriam variáveis explicativas do grau de satisfação do aluno quanto às instalações/equipamentos, concluímos que, apesar de em alguns parâmetros se estabelecer a relação entre estas variáveis, podemos dizer que essa relação é pouco expressiva se considerarmos o número de parâmetros utilizados, conforme a tabela 9. Tabela 9 - Relação verificada entre as variáveis género, ano de escolaridade e curso frequentado e o grau de satisfação face ao vários parâmetros
Variáveis explicativas Parâmetros
Género
Ano frequentado
Curso frequentado
(teste K-S)
(Teste Qui2Pearsons)
Horário da Biblioteca
X
X
Comodidade e Conforto
X
X
Ambiente de trabalho e de estudo Nº de computadores
X
X
X
X
X
X
Disposição dos recursos
X
X
X
Arrumação e disciplina
X
Informação aos utilizadores
X
X
(Teste Qui2Pearsons)
X - não se verifica - verifica-se
20 Relatório de Autoavaliação da Biblioteca Escolar - ESSPS
4. Grau de satisfação quanto aos recursos Mantendo a metodologia utilizada na recolha de respostas quanto ao grau de satisfação dos alunos quanto às instalações e equipamentos, a análise recai, agora, sobre os recursos disponíveis na BE. Os parâmetros utilizados e o resultado obtido, encontram-se na tabela 10.
Tabela 10- Grau de satisfação dos alunos quanto aos recursos da BE
Grau de satisfação 1
Facilidade em localizar recursos Acesso à Internet Utilização da fotocopiadora Fundo Documental existente Atualização de recursos Nº de documentos que se pode requisitar Período de devolução Nº de disponíveis Informação utilizadores
lugares aos
2
3
4
5
NR/ NS
N
%
N
%
N
%
n
%
n
%
2
2,0
14
6,0
55
23,4
108
46,0
53
22,6
3
16
6,8
25
10,6
80
34,0
80
34,0
31
13,2
3
9
3,8
20
8,5
77
32,8
81
34,5
40
17,0
8
4
1,7
13
5,5
73
31,1
97
41,3
43
18,3
5
4
1,7
15
6,4
75
31,9
97
41,3
40
17,0
4
3
1,3
10
4,3
70
29,8
96
40,9
51
21,7
5
4
1,7
13
5,5
69
29,4
102
43,4
42
17,9
5
8
3,4
22
9,4
64
27,2
96
40,9
40
17,0
10
4,3
11
4,7
40
17,0
103
43,8
70
29,8
5 1
A análise, mesmo feita na diagonal, da tabela 10, permite-nos reter que, também, neste domínio o grau de satisfação dos alunos é positivo. O maior descontentamento situa-se no acesso à Internet. Olhando agora para as medidas de dispersão central - média, mediana e moda - vamos tentar compreender o que mais desagrada e o que mais agrada aos nossos alunos.
21 Relatório de Autoavaliação da Biblioteca Escolar - ESSPS
Tabela 11 - Grau de satisfação dos Recursos - média, variante e moda
Média Mediana Moda
Facilidade em localizar os recursos 3,84 4,00 4
Acesso à Internet 3,37 3,00 3a
Utilização da fotocopiad ora
Fundos documentai s existentes
Atualizaç ão dos recursos
3,54 4,00 4
3,70 4,00 4
3,67 4,00 4
Nº de document os que se podem requisitar 3,79 4,00 4
Período de devoluçã o
Nº de lugares disponí veis
3,72 4,00 4
3,60 4,00 4
Com uma média de respostas a rondar os 3,65, o grau de satisfação é menor do que o registado na dimensão inferior, sendo o acesso à Internet e a utilização da fotocopiadora os principais. A moda das respostas (onde se verifica uma maior frequência de resposta) é de 4, exceto para as questões da Internet, onde se registam várias modas, sendo a mais expressiva o 3. A análise dos valores da variância permite-nos, contudo, ficar com uma análise mais consistente. A tabela 11 apresenta para todos os parâmetros, exceto o acesso à Internet, uma variância de 4. Este valor significa que 50% das respostas se situam no 4 e no 5. Mais, se considerarmos que os restantes 50% incluem, também o 4, o valor considerado aumenta. Uma análise mais fina das duas tabelas, permite-nos verificar: O acesso à Internet, a utilização da fotocopiadora e o número de lugares sentados são os parâmetros onde a insatisfação dos alunos mais se faz sentir; O acesso à Internet apresenta um baixo grau de satisfação; Em todos os parâmetros, com exceção do acesso à Internet, verifica-se que o peso do grau de satisfação positiva é superior a 50%; Os parâmetros com uma média superior a 3,70 são: facilidade em localizar recursos, nº de documentos requisitáveis, período de devolução e fundos documentais existentes.
22 Relatório de Autoavaliação da Biblioteca Escolar - ESSPS
Tabela 12 - Relação entre as variáveis Género, ano de escolaridade e curso frequentado e o grau de satisfação face a cada parâmetro
Variáveis explicativas Parâmetros
Facilidade em localizar recursos Acesso à Internet
Género
Ano frequentado
(teste K-S)
(Teste Qui2Pearsons)
X
Curso frequentado (Teste Qui2Pearsons)
X
X
Utilização da fotocopiadora
X
X
X
Fundos Documentais
X
X
Atualização de recursos
X
X
X
Nº de documentos que se pode requisitar
X
Período de devolução
X
X
X
Nº lugares sentados
X
X
X
X
Verifica-se Não se verifica
Da leitura dos resultados da significância dos Teste K-S (género) e Qui-quadrado (ano frequentado e curso), inferimos as seguintes relações : A influência do género sobre o grau de satisfação só se faz sentir no parâmetro Acesso à Internet; O grau de satisfação face ao Nº de documentos requisitáveis está relacionado com o Ano de escolaridade e Curso frequentado pelo aluno, no ano letivo 2014/2015; São os rapazes que mostram maior insatisfação face ao Acesso à Internet; São os alunos do 10º, 9º e 8º anos que indicam com maior frequência estarem muito satisfeito ou satisfeitos com a facilidade em localizar recursos, Fundos documentais existentes e nº de documentos que se pode requisitar; São os alunos do Ensino Básico (8º e 9º ), seguidos dos do Curso de Ciências e Tecnologias e Cursos Profissionais que apresentam um maior grau de satisfação com a facilidade em localizar recursos e número de documentos que se pode requisitar. Contudo, verificamos que não é possível inferir para o universo em estudo as relações que se estabelecem na amostra entre grande parte dos parâmetros utilizados e o género, o ano de escolaridade e o curso frequentado.
23 Relatório de Autoavaliação da Biblioteca Escolar - ESSPS
5. Grau de satisfação quanto à atuação do Assistente Operacional e dos Professores da equipa da BE Quisemos saber, também, utilizando a metodologia das questões anteriores, o grau de satisfação dos alunos com o tratamento que recebem por parte da equipa da Biblioteca Escolar: Assistente Operacional e Professores. Os parâmetros utilizados encontram-se na tabela 13. Tabela 13 - Grau de satisfação dos alunos quanto à atuação da equipa da BE (média e moda) Assistente Operacional Tratamento e atitude
Disponibilidade para com os utilizadores
Média
4,03
4,06
Moda
5
5
Professores
Eficiência e rapidez no atendimento
Tratamento e atitude
Disponibilidade para com os utilizadores
Eficiência e rapidez no atendimento
3,99
4,06
4,03
4,03
5
5
5
4
A análise dos valores da média e da moda de respostas aos parâmetros identificados, mostra-nos o agrado dos alunos pela atitude do AO e dos professores para com eles. A média situa-se no grau 4 - satisfeito, sendo a moda o grau 5 - muito satisfeito, com exceção da eficiência e rapidez no atendimento, por parte do professor, cuja tendência de resposta é de satisfeito - Grau 4. Através do Teste K-S, verificamos que o grau de satisfação dos alunos face à atuação dos membros da equipa da BE está relacionado com o género. Todos os valores apresentados situam-se abaixo de 5%, conforme se pode observar na tabela 16. Tabela 14 - Resultado da significância do Teste K-S: grau de satisfação face à atuação dos membros da equipa da BE e o género Assistente Operacional
Sig. Teste K-S
Professores
Tratamento e atitude
Disponibilidade para com os utilizadores
Eficiência e rapidez no atendimento
Tratamento e atitude
Disponibilidade para com os utilizadores
Eficiência e rapidez no atendimento
0.006
0,006
0,016
0,002
0,003
0,008
Os resultados da significância do Teste do Qui-quadrado de Pearson mostram-nos que o ano de escolaridade e o curso frequentado se encontram relacionados com o grau de satisfação apenas no que respeita ao Tratamento e Atitude, quer do AO, quer dos professores. O grau de satisfação face à Eficiência e rapidez no atendimento (professores) encontra-se, também, relacionado com o curso frequentado . 24 Relatório de Autoavaliação da Biblioteca Escolar - ESSPS
6. Grau de satisfação quanto às atividades desenvolvida pela BE
As atividades desenvolvidas pela BE foram, também, avaliadas pelos alunos através da escala de Likert, segundo a escala de resposta referida no ponto 3 deste relatório. Adotámos o mesmo design do ponto 4. Os resultados obtidos para todos os graus de satisfação encontram-se na tabela 15.
Tabela 15 Grau de satisfação dos alunos quanto às atividades desenvolvidas pela BE, por frequência absoluta e frequência relativa
Grau de satisfação 1
2
3
4
5
NR/ NS
N
%
N
%
N
%
n
%
n
%
Feira do Livro
5
2,13
9
3,83
52
22,13
106
45,11
61
25,96
2
Autor do mês
5
2,13
7
2,98
71
30,21
105
44,68
45
19,15
2
Semana da leitura
4
1,70
5
2,13
74
31,49
106
45,11
44
18,72
2
Exposições
5
2,13
8
3,40
49
20,85
109
46,38
62
26,38
2
Blog da Biblioteca
7
2,98
7
2,98
76
32,34
99
42,13
44
18,72
2
5
2,13
6
2,55
73
31,06
111
47,23
38
16,17
2
5
2,13
5
2,13
70
29,79
104
44,26
49
20,85
2
Dia da Biblioteca Escolar Dia Internacional do Livro e dos direitos de Autor
A análise da tabela 17 permite-nos constatar que as atividades desenvolvidas pela BE, e que constam do questionário, são do agrado dos alunos, ficando acima de 60% os satisfeitos e muito satisfeitos. Quanto à média e moda das respostas, a tabela 19 permite-nos corroborar a observação feita no parágrafo anterior. Porém, podemos ir um pouco mais longe e verificar que as exposições e a feira do livro são as atividades que maior satisfação dão aos alunos. A mediana das respostas indica-nos que 50% dos alunos se encontram satisfeitos ou muito satisfeitos no domínio das atividades, 25 Relatório de Autoavaliação da Biblioteca Escolar - ESSPS
Tabela 16 - Grau de satisfação dos alunos face às atividades desenvolvidas pela BE (média, mediana e moda)
Feira do livro
Autor do mês
Semana da leitura
Exposições
Blog da Biblioteca
Dia Biblioteca Escolar
Dia internacional do livro e dos direitos de autor
Média
3,90
3,76
3,78
3,92
3,71
3,73
3,80
Mediana
4,00
4,00
4,00
4,00
4,00
4,00
4,00
4
4
4
4
4
4
4
Moda
Estabelecendo, agora, a eventual relação entre o género e o grau de satisfação das atividade - Teste K-S, e a relação entre as variáveis ano de escolaridade e curso frequentado Teste de Qui-quadrado de Pearson, podemos verificar que: O grau de satisfação face às atividades realizadas está relacionado com o género dos inquiridos; O grau de satisfação das atividades está relacionado com o ano de escolaridade e o curso frequentado; São as raparigas que maior satisfação expressam em relação às atividades da BE; São os alunos do 10º, 9º e 8º que, no geral, referem estar satisfeitos ou muito satisfeitos com as atividades desenvolvidas; São os alunos do Ensino Básico (8º e 9º anos) que, no geral, indicam estar satisfeitos ou muito satisfeitos com as atividades desenvolvidas.
26 Relatório de Autoavaliação da Biblioteca Escolar - ESSPS
7. Avaliação global dos serviços prestados pela Biblioteca Escolar
Foi pedido aos alunos que procedessem à avaliação global dos serviços prestados pela BE, através da escala utilizada ao longo do questionário. O resultado encontra-se expresso no gráfico 7 e na tabela 17. Gráfico 7 - Avaliação Global da BE
Muito insatisfeito
6 7
50
Insatisfeito
42
Nem satisfeito, nem insatisfeito
124
Satisfeito Muito satisfeito
Tabela 17 - Avaliação Global da BE Grau de Satisfação
%
Muito insatisfeito
2,6
% acumulada 2,6
Insatisfeito
3,0
5,7
Nem satisfeito/ nem insatisfeito
17,9
24,0
Satisfeito
52,8
78,2
Muito satisfeito
21,3
100,0
A avaliação global da BE feita pelos alunos inquiridos é muito satisfatória; 74,1% dos alunos mostram-se satisfeitos ou muito satisfeitos com os serviços da BE, ou seja, 174 alunos estão satisfeitos ou muito satisfeito com a BE (na escala da RBE corresponde a bom e muito bom). Considerando os resultados obtidos nos domínios analisados neste estudo e os resultados na avaliação global, podemos concluir que a BE tem prestado um bom serviço junto
27 Relatório de Autoavaliação da Biblioteca Escolar - ESSPS
dos alunos. Contudo, importa identificar os aspetos menos conseguidos de modo a que esses constrangimentos sejam ultrapassados. Quanto às variáveis género, ano de escolaridade e curso frequentado, considerando o resultado da significância do Teste K-S (género) e Qui-quadrado de Pearsons (restantes variáveis), surgem como explicativas da avaliação global da BE efetuada pelos alunos.
28 Relatório de Autoavaliação da Biblioteca Escolar - ESSPS
SUGESTÕES DE MELHORIA APRESENTADAS PELOS ALUNOS _______________________________________________________________________
1. Alunos do Ensino Básico (8º e 9º anos) Solicitou-se aos alunos que apresentassem sugestões sobre o que gostariam de ver melhorado no âmbito da atuação da BE. As sugestões apresentadas e respetiva frequência de resposta encontram-se na tabela 18.. Tabela 18 Sugestões de melhoria (alunos do 8º e 9º anos) Sugestões
Nº
Mais computadores
15
Melhor equipamento informático
9
Melhor acesso à Internet
9
Maior velocidade da Internet
8
Mais lugares sentados
4
Permitir jogos não didáticos
3
Mais Recursos (DVD - filmes)
2
Livros mais recentes
2
Alargar período de devolução dos livros/DVD requisitados
2
Maior rapidez e eficiência no atendimento
2
Melhor Facilidade na localização do Fundo documental
2
Mais jogos
2
Mais atividades
2
Mais livros para adolescentes
1
Mais espaço
1
Melhorar a organização do espaço
1
Melhorar o ambiente da Biblioteca
1
Mais livros
1
Acesso ao Facebook
1
Atividades mais cativantes
1
29 Relatório de Autoavaliação da Biblioteca Escolar - ESSPS
Vinte e quatro alunos referiram mais e melhores computadores e 17 sugeriram maior velocidade e melhor acesso à Internet. Mais lugares sentados é outra sugestão apresentada. Todas as sugestões apresentadas estão contidas na tabela 21.
Gráfico 8 - Sugestões de melhoria mais relevantes - 8º e 9º anos (%)
Mais computadores
6% 22%
12%
Melhor equipamento informático
Melhor acesso à Internet Maior velocidade da Internet
13%
13%
Mais lugares sentados
Foi também referido que: Está tudo muito bem
4
Está bem
2
Não mudava nada
1
30 Relatório de Autoavaliação da Biblioteca Escolar - ESSPS
2. Alunos do Ensino Secundário As sugestões de melhoria apresentadas pelos alunos do ensino secundário encontramse na tabela 19,. Tabela 19 Sugestões de melhoria - Ensino Secundário Sugestões
Totais
Mais computadores
34
Maior velocidade de Internet
22
Melhor equipamento informático
17
Mais silêncio
13
Melhor acesso à Internet
10
Mais Recursos (DVD - filmes)
7
Melhorar o ambiente da Biblioteca
4
Mais espaço
4
Mais livros para adolescentes
3
Mais exemplares de cada livro
3
Mais lugares sentados
2
Livros mais recentes
2
Livros de autores conhecidos
2
Número de livros a requisitar
2
Livros em várias línguas
1
Menos barulho nos intervalos
1
Horário + prolongado
1
Mais 1 funcionário
1
Mais simpatia por parte dos professores Melhor divulgação das atividades realizadas pela BE Maior rapidez e eficiência no atendimento Mais revistas
1
Atividades novas
1
Atividades mais cativantes
1
Chão Novo
1
Não mudava nada
1
1 1 1
31 Relatório de Autoavaliação da Biblioteca Escolar - ESSPS
Um número significativo de sugestões estão relacionadas com mais e melhor equipamento informático (56 alunos) e maior velocidade e melhor acesso à Internet (32 alunos). Uma sugestão de melhoria apresentada merece a melhor atenção da equipa da BE quer pela sua natureza quer pelo nº de alunos que a referiram: mais silêncio (13), a que podemos adicionar melhorar o ambiente da BE (4 alunos) Gráfico 9 - Sugestões mais significativas dos alunos do Ensino Secundário (%)
Mais computadores 5,11 7,30 24,82
Maior velocidade de Internet Melhor equipamento informático
9,49
Mais silêncio Melhor acesso à Internet
12,41 16,06
Mais Recursos (DVD filmes)
Na perspetiva dos alunos, Básico e Ensino Secundário, os pontos a necessitarem de melhoria estão relacionados com os equipamentos informáticos e Internet. O silêncio foi referido por 13 alunos do Ensino Secundário.
32 Relatório de Autoavaliação da Biblioteca Escolar - ESSPS
PONTOS A NECESSITAREM DE MAIS ATENÇÃO _________________________________________________________________________
O ato de avaliar internamente um grupo, uma estrutura, uma instituição só produz significado se levar à ação. Serve para identificarmos os pontos fortes, mas também para nos interrogarmos sobre o que podemos alterar para ser ainda mais eficaz; serve para identificar pontos que merecem uma avaliação positiva mas a necessitarem de melhoria contínua; serve para identificar os pontos fracos. Sem mais delongas, apresentamos alguns aspetos suscitados pelo tratamento e análise dos resultados do questionário:
A. Frequência e utilização da BE Verificámos que o género e o ano de escolaridade dos alunos estão relacionados com a frequência da BE. Sabemos que não é fácil modificar práticas associadas ao género. Sabemos, também, que o social condiciona as nossas práticas, maneiras de ser, de estar , mas sabemos, ainda, que o social não se constitui como determinante das nossas vidas. Haja forma de o contrariar. Deste modo pensamos que a equipa da BE deverá refletir sobre as formas de trazer até à BE aqueles que se vão afastando ou raramente vêm. Dar prioridade ao que afasta, não menosprezando, contudo, o que aproxima. Mas este aspeto diz respeito aos vários atores. Não basta a Professora Bibliotecária fazer o possível e o impossível. A mudança não se faz com uma só pessoa.
B. Valorização da BE A BE é um serviço com utilidade para qualquer um dos intervenientes na comunidade educativa: alunos, professores, funcionários e Encarregados de Educação. A equipa da BE, por si só, não pode responsabilizar-se por todo o trabalho que é necessário fazer. A estrutura tem de ser sentida como fazendo parte integrante da escola, tem de se lhe reconhecer a utilidade devida, a BE tem de ser valorizada como fator de sucesso, nas mais variadas dimensões, só assim conseguimos que a BE atue dignamente.
33 Relatório de Autoavaliação da Biblioteca Escolar - ESSPS
A valorização tem de partir dos órgãos do governo da escola e das estruturas intermédias, para chegar aos professores. Só através dos Professores poderemos motivar os alunos e captá-los para as várias áreas de interesse que a BE disponibiliza.
C. Atividades desenvolvidas pela BE Neste domínio, os alunos mostram um grau de satisfação muito positivo. Há atividades que partem da BE para outras estruturas ou para a escola no seu todo. A BE tem orientações precisas da RBE quanto a atividades a desenvolver; outras, nomeadamente projetos, surgem em diversas alturas do ano, não ficando bem à BE não participar neles; outras ainda partem da iniciativa da Professora Bibliotecária que conta com o apoio da sua equipa. Pensamos, contudo, que a escola ou estruturas curriculares, também devem ter atividades onde a BE pode surgir como parceira e interveniente. Estas atividades têm de chegar à Biblioteca planificadas e com responsáveis definidos. E, por que não colocarmos a nossa criatividade, iniciativa e autonomia neste projeto comum?
D. Guia do Utilizador Face ao nº de alunos que indicaram não conhecer ou não saber o que é o Guia do Utilizador, pensamos, também, que a equipa da BE, no início do próximo ano, deve dinamizar o seu conhecimento e utilidade. Este trabalho tem sido feito em anos anteriores. Talvez pensar em outras estratégias.
E. Tomar como referencial os guias e outras orientações produzidas pala BE e aprovadas pelo Conselho Pedagógico A escola deve desenvolver junto dos seus alunos uma cultura científica pautada pelo rigor, humildade intelectual e por regras utilizadas pela comunidade cientifica. Acompanhando o grau de maturidade e ano de escolaridade do aluno, os professores devem aplicar as regras que a BE já definiu, por exemplo, para a apresentação da Bibliografia, das citações, e outras, bem como aquelas que estão a ser compiladas, esperando pelo seu arranjo gráfico.
34 Relatório de Autoavaliação da Biblioteca Escolar - ESSPS
F. Equipamentos informáticos e acesso à Internet Eis os verdadeiros pontos fracos da BE. Apontados como tal no questionário e os que são referidos com mais frequência nas sugestões dos alunos. O que os alunos referem é a idade dos equipamentos, mas, acima de tudo, do software. Os computadores são lentos, avariam com facilidade. A não atualização do software não lhes permite utilizar determinados programas para a realização dos seus trabalhos. O número de computadores é insuficiente face às requisições. A Internet é outro ponto fraco. Embora reconhecendo algumas melhorias feitas, consideram que o acesso e a velocidade da Internet nem sempre são assegurados. Este é um dos pontos fracos apontados em anos transatos. G. Outras situações O silêncio e melhorar o ambiente da BE aparecem com sugestões de melhoria. Porém, há aqui um constrangimento difícil de contornar: os intervalos. Vale, no entanto, a tentativa de resolver o problema. Mais lugares sentados e ampliação do espaço da BE são assuntos que alguns alunos vão referindo. O ambiente e o silêncio não estarão relacionados com o espaço e os lugares sentados existentes?
35 Relatório de Autoavaliação da Biblioteca Escolar - ESSPS
CONCLUSÃO _________________________________________________________________________
Subjacente à avaliação interna está o conhecer para agir, agir no sentido de melhorar e de resolver situações menos agradáveis. Agir implica, deste modo, mudar. A mudança não é um fenómeno que aconteça sem obstáculos ou de forma linear. É um fenómeno descontinuado que implica a presença de agentes de mudança confiantes na sua ação. Os professores são, em contexto escolar, os agentes de mudança ou os facilitadores desse processo. Contudo, não devemos elaborar trabalhos só para mostrar ao vizinho que também sabemos fazer ou para que as instâncias ministeriais tomem conhecimento de que fizemos. A isto chamamos burocracia. O destino do trabalho será a gaveta. Produzir estudos, trabalhos para que de algum modo se possa contribuir para a mudança, não é burocracia, é ação.
Neste trabalho não foi possível recorrer à triangulação da informação. A reorganização dos dois questionário (o nosso e o da RBE) para comparar o que pode ser comparado e a organização dos registo de informação para aqui serem utilizados exigiam um período de tempo não compaginável com a data de entrega do trabalho. Porém, nada se encontra concluído. Para o próximo ano, ou daqui a 2 ou 3, nós, ou outras pessoas, teremos sempre a oportunidade de o melhorar e de observar as alterações que se foram dando ao longo do período considerado.
15/07/2015
36 Relatório de Autoavaliação da Biblioteca Escolar - ESSPS