Como avaliamos a IA clínica
Testamos cada ferramenta contra um conjunto fixo de perguntas clínicas, avaliamos cinco dimensões de forma independente e publicamos cada alteração. A nossa metodologia é aberta para que possas decidir se confias nas nossas conclusões.
As cinco dimensões
01 — Precisão
Cada ferramenta responde ao mesmo conjunto de 50 perguntas que cobre apresentações comuns junto ao doente, interações medicamentosas, decisões guiadas por protocolos e diagnósticos raros mas importantes. As respostas são pontuadas em relação à fonte primária atual (recomendação, RCM ou revisão sistemática) numa escala de 0 a 10. Repetimos o teste a cada trimestre para detetar a deriva do modelo.
02 — Qualidade das citações
A ferramenta mostra-te de onde veio a resposta, de uma forma que possas verificar? Avaliamos: presença de citações, rastreabilidade até uma fonte primária, atualidade e a fração de afirmações realmente ancoradas versus geradas. Ferramentas que «soam bem» sem fonte têm teto de 5.
03 — Acessibilidade
Quem pode realmente usá-la? O custo, as restrições geográficas, as barreiras de verificação profissional e os requisitos de acesso institucional reduzem a pontuação. Uma ferramenta utilizável apenas por médicos verificados nos EUA não pode passar de 6 aqui, por melhor que seja.
04 — Velocidade
Tempo até obter uma resposta útil a partir de um arranque a frio, medido numa ligação residencial padrão. A utilidade ao lado do doente depende disto. Ferramentas que demoram mais de 10 segundos para uma consulta típica têm teto de 7.
05 — Suporte de idiomas
Qualidade da saída clínica em idiomas que não o inglês, avaliada por clínicos nativos sempre que possível. Ferramentas sem suporte multilingue confirmado são marcadas com «—» em vez de zero, e excluídas da componente linguística da pontuação global.
O que não fazemos
- Não aceitamos pagamentos, créditos gratuitos ou acesso beta em troca de cobertura.
- Não deixamos os fornecedores rever as pontuações antes da publicação.
- Não alteramos rankings retroativamente sem publicar o que mudou e porquê.
Conflitos e divulgações
Quando um membro da equipa editorial tem uma relação prévia com um fornecedor que cobrimos, essa relação é divulgada na nossa página de divulgações e o membro é dispensado de avaliar essa ferramenta. Quando uma ferramenta é referenciada como «escolha principal» ou «destacada», essa colocação deve ser defensável a partir do critério publicado — nunca apenas por preferência editorial.
Atualizações e correções
O Índice é atualizado trimestralmente. Quando uma pontuação muda, a mudança é registada com data e motivo. Se errarmos num facto, publicamos uma correção no artigo afetado e atualizamos o registo da nossa política editorial. Envia correções para editorial@theaugmentedclinician.com.