Gestão da Vigilância Sanitária · referência técnica

Práticas avaliativas na Vigilância Sanitária

Transforme dados em decisões para qualificar as ações da Vigilância Sanitária.

Conheça o percurso do Projeto IPA: construir um modelo lógico com a equipe, formular perguntas úteis, qualificar indicadores e usar os resultados na gestão.

O que significa institucionalizar a avaliação

Institucionalizar práticas avaliativas significa incorporar a produção, a interpretação e o uso de evidências à rotina da organização. Isso envolve liderança, pessoas capacitadas, regras de funcionamento, fontes de informação e tempo protegido para discussão dos resultados.

O Projeto Institucionalização de Práticas Avaliativas (IPA) articula três linhas: desenvolvimento da capacidade avaliativa; monitoramento e avaliação; e redes colaborativas. A proposta busca melhorar processos de trabalho e decisões, com aprendizagem compartilhada entre gestores e equipes.

Conceitos para orientar a aplicação
Conceito Como se aplica à VISA
Monitoramento Acompanhar sistematicamente indicadores e intervenções, reconhecer mudanças e subsidiar decisões durante a execução.
Avaliação Interpretar evidências e formular um julgamento explícito sobre o objeto, segundo perguntas e critérios definidos. Pode exigir análises além do painel de monitoramento.
Capacidade avaliativa Reunir competências, recursos, arranjos institucionais e condições para produzir, compreender e usar avaliações.
Uso dos resultados Transformar a análise em decisões, ações e revisão dos processos, acompanhando o que aconteceu depois.

O caráter é formativo: conhecer fragilidades, potencialidades e caminhos de melhoria. A contagem de atividades é uma informação de produção; deve ser relacionada aos objetivos e aos efeitos pretendidos para permitir uma discussão de desempenho.

Fonte: páginas 17–27 do arquivo PDF ↗

O que as quatro experiências ensinam

A publicação relata a implantação em Minas Gerais, Santa Catarina, Belo Horizonte e Florianópolis, no período de 2019–2020. Cada VISA adaptou o modelo à sua organização, prioridades e disponibilidade de dados. Esses pilotos são experiências de referência, não resultados medidos nas unidades do Rio Grande do Sul.

As macrofunções de gestão, regulação, controle do risco sanitário, monitoramento do risco sanitário e informação, comunicação e educação para a saúde orientaram a construção. Os componentes e subcomponentes foram ajustados em cada local; por exemplo, a segurança assistencial ganhou destaque próprio em Belo Horizonte.

Aplicação no RS: construir o modelo com a VISA Estadual, regionais e municípios envolvidos, conforme o objeto escolhido e as responsabilidades pactuadas. Aproveitar as experiências exige adaptar perguntas, fontes e critérios ao território; os indicadores dos pilotos não constituem metas universais.

Fonte: páginas 28–40 do arquivo PDF ↗

Preparar a equipe e as condições de trabalho

O percurso relatado começou com alinhamento entre a gestão e a equipe de implantação, análise de viabilidade e designação de um ponto focal. Um Comitê Condutor Local (CCL), com gerentes e referências técnicas, participou da construção dos instrumentos e da mobilização das áreas.

Organização do trabalho avaliativo
Papel ou condição Entrega esperada
Direção Definir propósito e prioridades, apoiar a participação, prover condições e usar os resultados nas decisões.
Ponto focal e CCL Articular áreas, organizar oficinas, validar o modelo e as perguntas e disseminar o processo.
Áreas técnicas Qualificar os dados, analisar resultados e limitações, propor e executar encaminhamentos.
Equipe de referência Apoiar o preenchimento e a consolidação dos instrumentos, preservando definições e memória institucional.
Informação e capacidade técnica Verificar disponibilidade, suficiência e qualidade das fontes, acesso aos dados e competências para interpretá-los.

Uma área específica de avaliação é um arranjo possível. A experiência destaca a proximidade da liderança e a integração ao trabalho, independentemente da forma administrativa adotada.

Fonte: páginas 27–28 do arquivo PDF ↗

Construir um modelo lógico antes de escolher indicadores

O modelo lógico explicita como a intervenção deveria funcionar: quais componentes e atividades são necessários e como se relacionam aos efeitos imediatos, intermediários e finais. Ajuda a tornar discutíveis as hipóteses que ligam o trabalho ao resultado sanitário.

  1. Delimitar a intervenção

    Definir problema, população, território, responsabilidades e contexto político e organizacional. Identificar quem usará a avaliação e para qual decisão.

  2. Mapear os componentes

    Organizar as macrofunções e subcomponentes pertinentes. Descrever atividades e condições estruturais, incluindo recursos e interfaces entre áreas.

  3. Explicitar os efeitos esperados

    Distinguir entregas imediatas e mudanças posteriores. Examinar se as relações propostas são plausíveis e quais fatores externos podem influenciar os efeitos.

  4. Validar coletivamente

    Discutir a representação com gestores e técnicos e validá-la nas instâncias pertinentes. Rever o modelo quando mudarem o contexto, as prioridades ou a intervenção.

Exemplo editorial: no acompanhamento de não conformidades, realizar reinspeções é uma atividade; produzir registros e encaminhamentos é uma entrega; corrigir os problemas é um efeito esperado. A redução do risco depende da efetividade dessas correções e de outras condições, não apenas do número de visitas.

Fonte: páginas 28–33 do arquivo PDF ↗

Da pergunta avaliativa à matriz de medidas

Formular perguntas segundo prioridade, utilidade, relevância e viabilidade. A pergunta precisa expressar o que se deseja saber, antes da escolha do indicador disponível. Os pilotos contemplaram alcance dos resultados, cobertura das ações e tendência da situação sanitária.

Exemplos para discussão local — adaptação editorial
Pergunta Critério Indicador possível Cuidado de interpretação
Como evolui a resposta às denúncias? Oportunidade da resposta Proporção de denúncias de uma coorte concluídas no intervalo localmente definido. Definir início e fim, universo, urgência e tratamento dos casos ainda abertos.
A fiscalização alcança o universo priorizado? Cobertura Proporção de estabelecimentos elegíveis inspecionados no período. Atualizar o cadastro, contar estabelecimentos únicos e considerar risco e atribuição.
As não conformidades estão sendo corrigidas? Resultado da intervenção Proporção de casos com correção verificada entre os casos elegíveis para acompanhamento. Uma redução nos registros pode refletir menor detecção; verificar cobertura e qualidade da informação.

A matriz de medidas articula pergunta, critério, indicador, fonte, periodicidade, cálculo, padrão e setor responsável. Os indicadores devem ser examinados quanto a validade, sensibilidade, especificidade, relevância, simplicidade e custo-efetividade.

Definir padrões a partir de referências normativas pertinentes, conhecimento científico e experiência documentada, incluindo séries históricas. Registrar o fundamento e revisar o padrão quando necessário. Os prazos presentes nos exemplos do livro pertencem aos pilotos e não são adotados automaticamente por esta página.

Fonte: páginas 34–40 do arquivo PDF ↗

Qualificar cada indicador e seus dados

A ficha de qualificação torna o indicador reproduzível e interpretável. O manual instrutivo também deve explicar o fluxo entre a coleta e a reunião de monitoramento.

Conteúdo mínimo para uma ficha de qualificação
Campo O que registrar
Identificação e critério Nome, pergunta à qual responde e atributo que se pretende observar.
Interpretação, usos e limitações Significado de aumento ou redução, decisões apoiadas e restrições à leitura.
Forma de cálculo Numerador, denominador, unidade, inclusões, exclusões e tratamento de duplicidades e ausência de dados.
Fonte de informação Sistema ou registro, forma de extração, data de corte e verificação da qualidade.
Periodicidade e responsável Frequência da apuração, setor responsável pela coleta e pela análise.
Padrão ou meta Referência pactuada, justificativa, sentido desejável e regra de julgamento.
Observações Estratificações relevantes, mudanças de método e fatos que afetaram a comparabilidade.

Exemplo de cálculo de cobertura

Exemplo editorial de indicador percentual, a ser qualificado pela unidade:

C=NinspecionadosNelegıˊveis×100%C=\frac{N_{\text{inspecionados}}}{N_{\text{elegíveis}}}\times 100\%

O numerador conta estabelecimentos elegíveis distintos inspecionados no período; o denominador representa o universo elegível definido na ficha. O mesmo estabelecimento é contado uma vez. Reinspeções podem ser acompanhadas em outro indicador de produção.

Se o denominador for zero, informar “não aplicável”, com justificativa; se o dado estiver ausente ou inconsistente, informar a limitação e tratar a qualidade do registro. Esses casos não representam cobertura zero. Por exemplo, 30 estabelecimentos inspecionados em um universo de 40 correspondem a 75% de cobertura, sem indicar, por si só, a qualidade da intervenção.

Fonte: páginas 35–41 do arquivo PDF ↗

Organizar a rotina do monitoramento

  1. Preparar a apuração

    Confirmar fichas, período, universo, fontes e responsáveis. Disponibilizar os instrumentos e orientar as áreas técnicas.

  2. Coletar e verificar

    Preencher dados e notas técnicas. Conferir consistência, completude, rastreabilidade e mudanças de definição antes da consolidação.

  3. Consolidar o painel

    Apresentar componente, indicador, meta, resultado, período, fonte e nota técnica. Preservar a série histórica e explicitar dados indisponíveis.

  4. Realizar a reunião

    Discutir os resultados com gestores e técnicos, considerando contexto, hipóteses explicativas e limitações. Registrar decisões e ações com responsáveis e prazos.

  5. Acompanhar os encaminhamentos

    Verificar a execução e seus efeitos. Revisar instrumentos, indicadores e estratégias quando a análise demonstrar necessidade.

O fluxo exemplificado no livro distribui atividades antes da reunião e mantém acompanhamento contínuo dos encaminhamentos. A unidade deve pactuar seu calendário e capacidade de execução. Nas lições aprendidas, a análise global do painel é proposta preferencialmente a cada trimestre ou, no limite, a cada semestre; a frequência da coleta depende de cada indicador.

Fonte: páginas 41–50 do arquivo PDF ↗

Interpretar o painel e decidir

O painel reúne resultados e metas, mas precisa de uma nota técnica que explique particularidades, causas prováveis e estratégias de superação. Cores podem ajudar na leitura, acompanhadas sempre de rótulos e valores acessíveis.

Na experiência descrita foram usadas faixas de meta alcançada, parcialmente alcançada e não alcançada, além de sinalização para resultado 20% acima da meta, que poderia indicar uma meta subestimada. Isso descreve o arranjo dos pilotos; cada indicador exige regra própria, especialmente quando valores menores representam melhor desempenho.

  • Comparar períodos com as mesmas definições e explicitar mudanças de cadastro, coleta, cobertura e perfil de risco.
  • Investigar resultados inesperados, inclusive os aparentemente favoráveis; maior detecção de problemas pode elevar um indicador de não conformidade.
  • Evitar atribuir causalidade apenas porque dois indicadores mudaram juntos. Considerar fatores externos e evidências adicionais.
  • Registrar a decisão, a ação, o responsável, o prazo e a forma de verificar seu efeito. Retomar os encaminhamentos na reunião seguinte.

A publicação adverte que medir e disponibilizar instrumentos não garante o uso dos resultados. A discussão participativa, o apoio da direção e o vínculo com decisões reais sustentam a aprendizagem.

Fonte: páginas 42–51 do arquivo PDF ↗

Sustentar a prática e integrar ao SGQ

As lições dos pilotos apontam para investimento em capacidade técnica, qualidade e interoperabilidade da informação, continuidade das reuniões e participação de regionais e equipes descentralizadas. Indicadores sem fonte viável precisam de revisão ou da construção de um registro que permita sua apuração.

A integração ao SGQ aproxima o monitoramento da avaliação de desempenho, da análise pela direção e das ações de melhoria. Evita manter duas rotinas concorrentes de coleta, sem perder a distinção entre avaliar o funcionamento do sistema de gestão e avaliar os resultados das ações sanitárias.

Sistema de Gestão da Qualidade

Articular os indicadores à avaliação de desempenho, à análise crítica e à melhoria.

Consultar o SGQ →

Código Sanitário

Relacionar a capacidade de avaliar à estrutura, ao planejamento e ao marco de atuação da VISA.

Conhecer o manual →

Relatórios de inspeção

Usar registros rastreáveis das constatações como fonte, segundo uma ficha definida.

Abrir relatórios →

Fonte: páginas 50–53 do arquivo PDF ↗

Fonte, leitura e download do original

Institucionalização de práticas avaliativas no Sistema Nacional de Vigilância Sanitária: da proposta teórico-metodológica à vivência prática. Ministério da Saúde, Anvisa e Hospital Alemão Oswaldo Cruz, no âmbito do Proadi-SUS. 2020. Documento de 60 páginas fornecido para este acervo.

Esta página é uma síntese autoral de apoio à leitura e à aplicação, com exemplos editoriais identificados. O documento completo, seus quadros, figuras e referências permanecem disponíveis no PDF original.

Cópia integral preservada. Reprodução disponibilizada com atribuição à fonte, para consulta gratuita e sem finalidade comercial. As remissões usam a posição da página no arquivo PDF, que pode diferir da numeração impressa.