Skip to content

Métricas e Classificação

Especificação técnica — como desempenho e nível são computados

Métricas e Classificação

Esta página responde a uma pergunta central: como o sistema transforma as respostas e interações do Aluno em notas, classificações e métricas analíticas?

A resposta se desdobra em três atos. Primeiro, cada avaliação produz uma Nota Real (NR) — o desempenho bruto. Depois, o sistema aplica pesos por tipo de simulado para gerar a Nota Bruta (NB) e ajusta por Importância e Incidência para produzir a Nota Ajustada (NA). Por fim, as métricas são consolidadas em dimensões de análise — por Unidade, Disciplina, Módulo e visão geral — alimentando relatórios, gráficos e a priorização pedagógica.

As entidades pertencem ao domínio metrics.


Ato 1 — Nota Real (NR)

A Nota Real é o desempenho bruto do Aluno em cada simulado, calculada diretamente a partir dos acertos:

  • Questionário VF — percentual de acertos (respostas corretas / total de questões × 100)
  • Questionário Objetivo — percentual de acertos
  • Simulado Escrito — nota atribuída pelo Tutor conforme critérios de correção (critério + pontos por critério + nota máxima)

A NR é a nota usada no campo de desempenho do Aluno e na Área do Aluno (dashboards).


Ato 2 — Nota Bruta (NB) e Nota Ajustada (NA)

Nota Bruta (NB)

A NB aplica pesos de relevância por tipo de simulado para cada Unidade:

Componente Peso
VF (média dos simulados VF da Unidade) 1
Simulados Escritos (média) 2
Simulado Objetivo (média acumulada das questões objetivas ao longo das RGs) 3

Fórmula com os 3 componentes:

NB = (VF_médio × 1 + Escritos_médio × 2 + Objetivas_médio × 3) ÷ 6

Quando um componente não existe (ex: Produto sem Simulado Escrito), a divisão muda proporcionalmente:

Componentes presentes Divisor Exemplo
VF + Escritos + Objetivo 6 Caso completo
VF + Objetivo 4 Sem Simulado Escrito
Apenas VF 1 Só Questionário VF

Simulado Objetivo acumulativo

O componente Objetivas_médio é a média de acertos das questões objetivas ao longo de todas as Revisões Gerais já realizadas. A cada nova RG, a média é recalculada considerando todas as questões já aplicadas.

Exemplos numéricos da NB

Exemplo 1 — Após CDA (sem Simulado Objetivo ainda):

  • DI: 2 acertos de 5 → 40%
  • SVD: 2 acertos de 5 → 40%
  • Simulado Escrito (SE): 60%

Componentes: VF_médio = (40 + 40) / 2 = 40%, SE = 60%. Sem Objetivo ainda → divisor = 3 (peso 1 + peso 2).

NB = (40 × 1 + 60 × 2) / 3 = 160 / 3 = 53,33%

Exemplo 2 — Após RG1 (Simulado Objetivo entra):

O Aluno recebeu 3 questões objetivas na RG1 e acertou 1 → 33,33%.

Componentes: VF_médio = 40%, SE = 60%, OBJ_médio = 33,33%. Divisor = 6 (1+2+3).

NB = (40 × 1 + 60 × 2 + 33,33 × 3) / 6 = (40 + 120 + 100) / 6 = 43,33%

Exemplo 3 — Após RG2 (mais questões objetivas acumuladas):

Na RG2, mais 2 questões objetivas, acertou as 2 → OBJ_médio recalculado com todas as 5 questões: 3 acertos de 5 = 60%.

NB = (40 × 1 + 60 × 2 + 60 × 3) / 6 = (40 + 120 + 180) / 6 = 56,67%

Essa lógica se replica conforme o Aluno avança no roteiro. Caso não exista algum tipo de simulado (não cadastrado, não enviado, ou Produto sem Tutor), a divisão segue a respectiva proporção dos pesos presentes.

Nota Ajustada (NA)

A NA aplica um Bônus de Relevância à NB com base nos fatores de Importância e Incidência configurados por Unidade na Trilha:

BÔNUS = (IMPORTÂNCIA + INCIDÊNCIA - 2.0) × 15
NA = NB + BÔNUS

A NA é limitada a 100.

Regras de fallback:

Cenário Comportamento
Ambos os fatores definidos Fórmula normal
Apenas um fator definido O fator ausente usa valor 1.0
Nenhum fator definido Ambos usam 1.0 (bônus = 0)

Os valores de Importância e Incidência seguem a escala:

Classificação Fator
Baixa 1.0
Média 1.1
Alta 1.3
Altíssima 1.5

O bônus máximo possível é (1.5 + 1.5 - 2.0) × 15 = +15 pontos — perceptível mas controlado.

Exemplo numérico da NA

Continuando o Exemplo 3 (NB = 56,67%):

  • Importância da Unidade: Alta (1.3)
  • Incidência da Unidade: Altíssima (1.5)
BÔNUS = (1.3 + 1.5 - 2.0) × 15 = 0.8 × 15 = 12
NA = min(56.67 + 12, 100) = 68.67%

Com NA = 68,67%, o Aluno seria classificado como Intermediário (entre 50% e 79%).

Exemplo com fallback — apenas Incidência definida (Alta = 1.3), Importância ausente:

BÔNUS = (1.0 + 1.3 - 2.0) × 15 = 0.3 × 15 = 4.5
NA = 56.67 + 4.5 = 61.17%

Classificação de Nível

A NA (ou NB quando NA não se aplica) é comparada contra os limiares configurados:

Nível Faixa default
Básico abaixo de 50%
Intermediário 50% a 79%
Avançado 80% ou mais

Esses limiares são defaults globais com override por Trilha (decisão A-10).

Reclassificação de Nível

A Reclassificação ocorre quando novas evidências entram no histórico (SVD no CDA, Simulado Objetivo na Revisão Geral). O nível pode subir ou descer — um Aluno classificado como Avançado pode ser reclassificado como Básico se o desempenho cair.

Entidades envolvidas

Entidade Tipo Subdomain Papel
classification metric_group metrics Resultado categórico (Nota + Nível)
level_classification process_domain metrics Processo de Classificação de Nível
relevance_bonus metric metrics Bônus de Importância + Incidência

Ato 3 — Dimensões de análise e consolidação

Motor de Consolidação de Métricas

O Motor de Consolidação de Métricas é a camada interna que agrega os resultados individuais em dimensões de análise:

Dimensão Como é calculada
Desempenho por Unidade NA da Unidade (ou NB quando NA não se aplica)
Desempenho por Disciplina Média aritmética simples das NAs de todas as Unidades já estudadas da Disciplina
Desempenho por Módulo Média aritmética simples das NAs das Unidades do Módulo
Desempenho Geral Média aritmética simples das médias de todas as Disciplinas

Todas as médias são aritméticas simples (não ponderadas).

Progresso do Plano de Estudo

O Progresso é quantificado nominalmente pela quantidade de Unidades e Avaliações concluídas — não por horas gastas. Em Módulos Dinâmicos, o Denominador Dinâmico de Progresso ajusta a linha de chegada conforme a carga efetivamente liberada ao Aluno.

Critérios para criação do Simulado Objetivo

A classificação por Unidade orienta a montagem do Simulado Objetivo nas revisões (Critério de Priorização):

  1. Priorizar questões de Unidades classificadas como Básico
  2. Completar com Intermediário, depois Avançado
  3. Priorizar as mais antigas quando há excesso de Básico
  4. Distribuir 1 questão por Unidade antes de repetir
  5. Priorizar questões ainda não utilizadas
  6. Reutilizar quando o estoque se esgotar

Esse critério usa a Janela de Revisão como escopo de seleção.

Gráficos de Desempenho

O Aluno tem acesso a dois eixos de visualização: Desempenho (rendimento) e Progresso/Avanço.

Nomenclaturas usadas nos gráficos:

  • SVF = Simulados de Verdadeiro e Falso
  • SOBJ = Simulados de Questões Objetivas
  • SESC = Simulados de Dissertação / Discursivas / Peças Práticas

Catálogo de gráficos de desempenho

# Gráfico Fórmula / descrição
1 Desempenho Geral de rendimento Média aritmética simples das médias de todas as Disciplinas
2 Desempenho por tipo de fonte (Lei, Jurisprudência, Doutrina) Filtra por question_category
3 Desempenho por tipo de simulado (SVF, SOBJ, SESC) Média por tipo
4 Desempenho por tipo de simulado × tipo de fonte Cruzamento dos dois filtros
5 Desempenho por Disciplina Média das Unidades já estudadas da Disciplina
6 Desempenho da Disciplina por tipo de fonte Média dos SVF 1/2 e eventuais SOBJ da Disciplina por fonte
7 Desempenho da Disciplina por tipo de simulado Média por tipo dentro da Disciplina
8 Desempenho da Disciplina por tipo de fonte × tipo de simulado Cruzamento dentro da Disciplina
9 Desempenho por Módulo Média das Unidades do Módulo
10 Desempenho por Módulo × Disciplina Cruzamento Módulo/Disciplina
11 Desempenho por Módulo × tipo de fonte Cruzamento Módulo/fonte
12 Desempenho por Módulo × tipo de simulado Cruzamento Módulo/tipo
13 Desempenho por Módulo × tipo de fonte × tipo de simulado Cruzamento triplo

Resumidamente: é possível cruzar os mais diversos tipos de desempenho. Além disso, é possível incidir grau de Importância ou Incidência como critério adicional, e o registro de tempo é relevante.

Métricas complementares de progresso

  • Total de Unidades estudadas
  • Total de Unidades economizadas (por Dispensa)
  • Tempo médio gasto por simulado e por tipo de simulado
  • Quantidade de Unidades revisadas

Rastreador de Hábitos

Os resultados de desempenho podem ser cruzados com os dados do Rastreador de Hábitos (por Unidade ou por Módulo):

  • Grau de: alerta, sono, foco atencional, esforço, motivação, hidratação, exposição à luz solar
  • Periodicidade de treino físico
  • Manejo das emoções
  • Alimentação

Rastreador de Hábitos: V2

As regras detalhadas do Rastreador de Hábitos serão escritas em documento separado.

Avaliação de Tutores

Rubrica de avaliação

O Aluno avalia o Tutor por meio de 5 perguntas (escala quantitativa + campo de observações):

  1. Responde suas dúvidas jurídicas de forma adequada e no prazo estabelecido?
  2. Cumpre os prazos estabelecidos na devolução das correções dos simulados escritos?
  3. Mantém sua motivação alta para estudar?
  4. Analisa seus gráficos de desempenho, fazendo acompanhamento de progresso e dando sugestões de melhoria?
  5. Te auxilia no funcionamento tecnológico da plataforma quando necessário?

O Aluno pode ignorar a avaliação (botão disponível).

Além das avaliações programadas, o Aluno pode realizar uma avaliação voluntária adicional (botão “avaliar tutor agora”) a qualquer momento.

Categorias de desempenho do Tutor

Categoria Pontuação
Excelente ≥ 80%
Proficiente ≥ 60% e < 80%
Precisa Melhorar ≥ 40% e < 60%
Inaceitável < 40%

O resultado é obtido pela média de todas as avaliações dos Alunos vinculados ao Tutor.

Periodicidade de avaliação por tipo de Produto

Cursos Regulares:

Avaliar o Tutor a cada 3 meses de curso ou 25%, 50%, 75% e 100% de evolução no Roteiro de Estudos — o que acontecer primeiro.

Avaliação Critério
1ª 3 meses ou 25%
2ª 6 meses ou 50%
3ª 9 meses ou 75%
4ª 12 meses ou 100%
5ª+ A cada 3 meses até atingir 100%

Cursos Reta Final:

Somente quando existir Simulados Escritos. Avaliar a cada 1 mês ou 33%, 66%, 100%.

Avaliação Critério
1ª 1 mês ou 33%
2ª 2 meses ou 66%
3ª 3 meses ou 100%
4ª+ A cada mês até atingir 100%

Cursos de Simulados (fixo, sem edital):

Módulos estáticos com trava semanal. Avaliar a cada 1 mês até esgotar o curso.

Cursos de Simulados (vinculado a edital):

Curso com data específica de início e término (normalmente 2 meses). Avaliar a cada 2 Módulos.

Visibilidade da avaliação

Na plataforma Admin:

  • Informações do Tutor → botão “Detalhar Desempenho” → lista de cursos com desempenho por curso → botão “Detalhar” por curso → lista de Alunos com avaliações e observações
  • Usuários → Tutor → mesma interação
  • Usuários → Aluno → Curso vinculado → avaliações do Tutor
  • Curso → Aluno (card) → avaliações feitas pelo Aluno para o Tutor

Restrição de visibilidade

O card do Aluno visível para o Tutor não deve mostrar a avaliação que o Aluno fez dele.

Relatórios consolidados

Os resultados consolidados alimentam:

  • Área do Aluno — dashboards com NR, progresso, classificação por Disciplina
  • Relatório de Desempenho — consolidado para o Gestor Pedagógico
  • Relatório do Tutor — métricas de acompanhamento e avaliação
  • Gráficos de Desempenho — 13 visualizações conforme catálogo acima

Entidades envolvidas

Entidade Tipo Subdomain Papel
metrics_consolidation_engine process_domain engine.algorithm Motor que agrega métricas
overall_performance metric metrics Desempenho Geral
discipline_performance metric metrics Desempenho por Disciplina
module_perf_dimension metric metrics Desempenho por Módulo
report entity metrics Relatório consolidado

Modelo de dados

Métricas e classificação

# Identifier Tipo Subdomain
1 classification metric_group metrics
2 level_classification process_domain metrics
3 relevance_bonus metric metrics
4 overall_performance metric metrics
5 discipline_performance metric metrics
6 module_perf_dimension metric metrics
7 report entity metrics

Notas

# Identifier Tipo Subdomain Papel
8 Nota Real (NR) metric metrics Desempenho bruto por simulado
9 Nota Bruta (NB) metric metrics Desempenho ponderado por tipo
10 Nota Ajustada (NA) metric metrics NB + Bônus de Relevância

O que esta página não define

  • Como cada tipo de atividade é executado pelo Aluno → Atividades (Passo 8)
  • Como o CDA usa a classificação para liberar atividades → Motor de Execução (Passo 7)
  • Como o frontend apresenta métricas ao Aluno → Entrega ao Aluno (Passo 10)

Referências

Navigation

Type to search…

↑↓ navigate↵ selectEsc close