Sistema de Pesquisa
Paulo Lopes e David Cruz
Apoio Logístico:
Patrocinadores PLATINA:
Patrocinadores OURO:
Patrocinadores PRATA:
Agenda
Funcionalidades estruturais
Análise retrospetiva
Consolidação
Balanço
Trabalho futuro
Hosted
Funcionalidades estruturais
Local
Índice Central
Serviços de contexto
Pesquisa Federada
Índice Central
Funcionalidades estruturais
Títulos All for All Geral
Funcionalidades estruturais
Funcionalidades estruturais
Índice Central
Pesquisa Federada
+
Títulos S4S e títulos não
cobertos pelo índice central
Out
Funcionalidades estruturais
Funcionalidades estruturais
Funcionalidades estruturais
Funcionalidades estruturais
Funcionalidades estruturais
Funcionalidades estruturais
Análise retrospetiva
Consolidação
Balanço
Trabalho futuro
Análise retrospetiva
2010
Estudo / seleção
Fevereiro de 2011
Início da
implementação
Dezembro de 2011
Entrada em
produção
2012
Consolidação
Análise retrospetiva
Análise retrospetiva
Novembro de 2011
Fevereiro de 2011
Interface
Configuração
dos recursos
(ativação,
lista de títulos
A4A geral,
Conjuntos de
pesquisa
Tradução da
interface e
ajudas para
Português
Análise
pericial de
usabilidade
Correções ao
nível da
interface
Correção e resolução de Problemas
Correções
técnicas
Funcionalidades estruturais
Análise retrospetiva
Consolidação
Balanço
Trabalho futuro
Consolidação
Jan 2012
•
•
•
•
Dez 2012
Testes de usabilidade
SFX - Suporte para e-books
Upgrade do Primo para a versão 4
Taxa de cobertura
Suporte aos utilizadores
Consolidação
Testes de usabilidade – Objectivos
– Avaliar a eficácia global dos utilizadores na execução
de tarefas básicas.
– Testar a reformulação e as mudanças da nova
versão
– Percebem a diferença entre pesquisa por índice e
meta-pesquisa?
– Criar um protocolo base para repetir teste de
usabilidade iterativamente.
Consolidação
Testes de usabilidade – como foi testado?
– Testes laboratoriais de usabilidade com 6
utilizadores.
– Pré-testes com 2 utilizadores paras validar o
processo e as tarefas
– 5 participantes detetam 85-90% dos problemas.
(Virzi, 1992)
Consolidação
Testes de usabilidade – 7 tarefas
1. Pesquisa simples
2. Pesquisa por um autor específico
3. Pesquisa por documentos numa linguagem
específica
4. Obter resultados de um único editor
5. Utilização a meta-pesquisa
6. Guardar resultado na área pessoal
7. Consultar a última edição de um periódico
Consolidação
Consolidação
Testes de usabilidade – Principais problemas
– Seleção de recursos
Consolidação
– “pesquisa rápida” versus “pesquisa exaustiva
• Qual é a diferença?
• Qual é melhor?
Consolidação
– Terminologia
O que é:
• “Pesquisa exaustiva”
• “Primo” ?
• “Primo central” ?
• “Coleção” ?
• “Mail encoding” ?
Consolidação
• Melhorar a Terminologia
– Criaram-se questionários para obter a melhor
terminologia
– Perguntas abertas e fechadas
– Duas perguntas para cada dúvida de terminologia
Consolidação
Testes de usabilidade – Outros problemas
– Não é possível filtrar pelo ano corrente.
– Símbolo de “adicionar à área pessoal” confundido
com um bullet.
– Não é possível recuperar a palavra-passe.
–…
Consolidação
Testes de usabilidade – Recomendações
– 32 recomendações de melhoria
• 13 implementadas com sucesso
• 7 em execução
• 3 com pedidos de melhoria junto do fornecedor
• 9 tecnicamente não viáveis
Consolidação
Problemas / recomendações
Ex Libris
b-on
Sim / não / porquê
Consolidação
Consolidação
Testes de usabilidade – Resumo
– Bons resultados para pesquisa simples
– Piores resultados para pesquisas mais específicas ou
funcionalidades avançadas
– 34 recomendações (a maioria resolvidas/em curso)
– 77% de sucesso na realização das tarefas
– 64% de satisfação dos utilizadores
(nos questionários SUS)
Consolidação
Consolidação
Testes de usabilidade – Saber mais
– Consulte o relatório de usabilidade em:
http://www.b-on.pt/downloads/Ajuda/relatoriousabilidade.pdf
(Está em inglês)
Consolidação
• SFX – Suporte para e-books
Consolidação
• Upgrade do Primo – versão 4
– Entrega de resultados com base em ranking
personalizado (de acordo com o perfil do
utilizador);
– Opções de filtragem de acordo com as
preferências do utilizador;
– Pesquisas por períodos temporais;
– Exportação de referencias em formato RIS;
– Salvaguarda de páginas inteiras de resultados na
área pessoal.
Consolidação
• Entrega de resultados com base em ranking
personalizado (de acordo com o perfil do utilizador);
Consolidação
• Opções de filtragem de acordo com as preferências do
utilizador;
Consolidação
• Pesquisas por períodos temporais;
Consolidação
• Exportação de referencias em formato RIS;
Consolidação
• Salvaguarda de páginas inteiras de resultados na área pessoal.
Consolidação
• Taxa de cobertura – adições em 2012
Tipo de
recursos
Gratuitos
Acesso
Recursos
Préindexados
BioMed; Bioline; DOAJ; DOAB; Future
Science Group; Medline/Pubmed; Project
Gutenberg: PLoS; Scielo; DialNet; RCAAP;
Springer Open
Préindexados
ACM; ACS (via CrossRef); AIP; AR; Elsevier;
IEEE; IOP; Nature; RSC; SAGE; SIAM;
Spirnger; T&F; Wiley; Web of Science; ASC
e BSC
Remotos
Pré-indexados;
ACS; WoK; Zentralblatt; BD EBSCO
Préindexados
Cambridge; Emerald
Remotos
Blackwell; BD EBSCO
All for All
Some for
Some
Funcionalidades estruturais
Análise retrospetiva
Consolidação
Balanço
Trabalho futuro
Balanço
Balanço
Nº de Pesquisas
Nº de pesquisas no novo sistema - Ano 2012
500.000
450.000
400.000
350.000
300.000
250.000
200.000
150.000
100.000
50.000
-
JAN
FEV
MAR
ABR
MAI
JUN
JUL
AGO
SET
OUT
NOV
DEZ
Remotas 36.483 28.670 40.499 28.620 31.191 25.420 18.988 9.612 18.006 39.965 35.500 3.360
Indexadas 202.20 189.91 308.47 250.70 309.65 229.53 163.92 96.395 200.05 459.89 425.75 280.39
3.5 milhões de pesquisas
Pesquisa Global (remotas) com utilização inferior a 10%
Balanço
Balanço
1º Trim
nº pedidos tx integral
2012
3º Trim
4º Trim
Total
832.624 777.617 504.576 903.164 3.017.981
nº pedidos com origem no RCAAP
2.809
331
100
2.713
5.953
nº pedidos com origem no Google
Scholar
97.012
89.891
64.582
85.489
336.974
nº pedidos tx integral
2011
2º Trim
171.606 511.808 379.118 723.187 1.785.719
nº pedidos com origem no RCAAP
7.064
10.123
10.009
45.145
72.341
nº pedidos com origem no Google
Scholar
12.264
77.564
56.856
82.333
229.017
3.017.981 pedidos de texto integral a partir do SFX. Quase o dobro de 2011.
Balanço
• Bons indicadores de utilização
• Feedback positivo por parte dos utilizadores
• Facilidade de administração (ativação de
títulos no índice central)
• Modelo SaaS
– Redução do TCO, redundância, escalabilidade, …
Balanço
• Integração Metalib / Metalib +
– Módulo de autenticação
– Exportação das pastas pessoais
• Modelo SaaS
– Ambiente partilhado; Configurações “Estruturais”
não podem ser alteradas;
– Tempo de resposta.
Balanço
• Taxa de cobertura
– Não cobre ainda a totalidade dos recursos b-on;
– Os recursos não cobertos continuam a ser
acedidos via Metalib;
• A funcionalidade “Pesquisa Global” é
penalizada pela lentidão da entrega dos
resultados (pesquisa federada via Metalib)
Balanço
• Problemas conhecidos
–
–
–
–
Módulo de autenticação;
Importação de dados da Área Pessoal;
Tradução (aspetos a melhorar);
Interface “Recursos” (sugestão de melhoria
enviada para a EL)
– One size (doesn’t) fits all - Recursos subscritos no
índice central idênticos para todos os membros;
– Referência de acesso ao texto integral pode conter
falsos positivos quando os metadados estão
incompletos
Funcionalidades estruturais
Análise retrospetiva
Consolidação
Balanço
Trabalho futuro
Trabalho futuro
• Melhoria contínua
– Aumento da fiabilidade
– Correções e suporte aos utilizadores
• Módulo de autenticação
– Autenticação federada
• Melhoria da tradução da interface
Obrigado