Avaliação de Estudos Acadêmicos
Use esta habilidade para avaliar trabalhos acadêmicos ou científicos com uma rubrica repetível.
Quando Usar
- Revisando um artigo de pesquisa, proposta, capítulo de tese ou revisão de literatura.
- Verificando se as afirmações são apoiadas por evidências citadas.
- Avaliando metodologia, desenho de estudo, análise ou limitações.
- Comparando dois ou mais artigos quanto à qualidade ou relevância.
- Produzindo feedback estruturado para revisão.
Escopo da Avaliação
Comece identificando o artefato:
- artigo de pesquisa empírica
- artigo teórico
- relatório técnico
- revisão sistemática ou narrativa da literatura
- proposta de pesquisa
- capítulo de tese ou dissertação
- resumo de conferência ou artigo curto
Em seguida, escolha o escopo:
- abrangente: todas as dimensões da rubrica
- direcionado: uma ou duas dimensões, como método ou citações
- comparativo: classificar vários trabalhos contra a mesma rubrica
Rubrica
Pontue cada dimensão aplicável de 1 a 5:
- 5: excelente; claro, rigoroso e pronto para publicação
- 4: bom; pequenas melhorias necessárias
- 3: adequado; lacunas significativas, mas utilizável
- 2: fraco; revisão substancial necessária
- 1: ruim; grandes problemas de validade ou clareza
Use N/A para dimensões que não se aplicam.
1. Problema e Pergunta de Pesquisa
- O problema é claro e específico?
- A contribuição é significativa?
- O escopo e as premissas são explícitos?
- A pergunta corresponde à contribuição reivindicada?
2. Literatura e Contexto
- O trabalho prévio relevante é coberto?
- O trabalho sintetiza, em vez de apenas listar fontes?
- As lacunas são identificadas com precisão?
- Fontes recentes e fundamentais estão equilibradas?
3. Metodologia
- O método responde à pergunta de pesquisa?
- As escolhas de desenho são justificadas?
- Variáveis, conjuntos de dados, participantes ou materiais são descritos claramente?
- Outro pesquisador poderia reproduzir o trabalho?
- Restrições éticas e práticas são reconhecidas?
4. Dados e Evidências
- As fontes de dados são credíveis e apropriadas?
- O tamanho da amostra ou cobertura do corpus é adequado?
- As decisões de inclusão, exclusão e pré-processamento estão documentadas?
- Dados ausentes e riscos de viés são discutidos?
5. Análise
- Os métodos estatísticos, qualitativos ou computacionais são apropriados?
- As linhas de base e controles são justos?
- Verificações de incerteza, sensibilidade ou robustez são incluídas quando necessário?
- Explicações alternativas são consideradas?
6. Resultados e Interpretação
- Os resultados são apresentados claramente?
- As afirmações permanecem dentro das evidências?
- Figuras, tabelas e métricas são compreensíveis?
- Resultados negativos ou nulos são tratados honestamente?
7. Limitações e Ameaças à Validade
- As limitações são específicas, não genéricas?
- Os riscos de validade interna, externa, de construto e de conclusão são abordados?
- O artigo distingue especulação de resultados demonstrados?
8. Escrita e Estrutura
- O argumento é fácil de seguir?
- As seções estão organizadas em torno da pergunta de pesquisa?
- Definições e notações são claras?
- O tom é preciso e acadêmico?
9. Citações
- Os artigos citados apoiam as afirmações vinculadas a eles?
- Fontes primárias são usadas quando possível?
- As revisões são rotuladas como revisões?
- Preprints são rotulados como preprints?
- Os metadados e links de citação estão corretos?
Processo de Revisão
- Leia o resumo, introdução, figuras e conclusão para a contribuição reivindicada.
- Leia métodos e resultados para a qualidade das evidências.
- Verifique as afirmações mais fortes contra as fontes citadas.
- Pontue cada dimensão aplicável.
- Separe bloqueadores críticos de sugestões de revisão.
- Termine com as próximas edições concretas.
Modelo de Saída
# Avaliação de Estudos Acadêmicos: <Artefato>
## Avaliação Geral
- Pontuação geral: <1-5 ou N/A>
- Confiança: <alta | média | baixa>
- Resumo: <3-5 frases>
## Pontuações por Dimensão
| Dimensão | Pontuação | Evidência | Prioridade de revisão |
| --- | ---: | --- | --- |
| Problema e pergunta | | | |
| Literatura e contexto | | | |
| Metodologia | | | |
| Dados e evidências | | | |
| Análise | | | |
| Resultados e interpretação | | | |
| Limitações | | | |
| Escrita e estrutura | | | |
| Citações | | | |
## Problemas Críticos
## Revisões Recomendadas
## Verificações de Evidências Necessárias
Armadilhas
- Não use a pontuação como substituto para feedback concreto.
- Não penalize um artigo por omitir uma dimensão fora de seu escopo.
- Não trate contagem de citações, veículo ou reputação do autor como prova de qualidade.
- Não aceite afirmações não suportadas só porque aparecem no resumo.