mcloh/decision-models-benchmark
1
0
Fork 0
mirror of https://github.com/mcloh/decision-models-benchmark.git synced 2026-11-06 06:14:11 +00:00
Code Issues Packages Projects Releases Wiki Activity

Teste final e análise (tarefas 63–74): resultados, gráficos e README

Browse Source 
Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
This commit is contained in:
Marcos Lohmann
2026-10-07 20:53:56 -03:00
parent 20ddea6850
commit 98f042c68a
67 changed files with 38860 additions and 526 deletions
Download Patch File Download Diff File Expand all files Collapse all files

24
reports/test/errors-high-impact-laya-cpu.jsonl Normal file
View File

@@ -0,0 +1,24 @@
{"id": "g0013-conta_contestacao-indireto_multiplo-00-D1", "gold": "sem_correspondencia", "pred": "roaming_cobranca", "confidence": 0.9406, "class": "intencao_fora_das_opcoes", "profile": "indireto_multiplo"}
{"id": "g0123-vas_cancelamento-emocional-06-D1", "gold": "vas_cancelamento", "pred": "conta_contestacao", "confidence": 0.9406, "class": "taxonomia_par_dificil", "profile": "emocional"}
{"id": "g0241-roaming_duvida-regionalismo-04-D1", "gold": "roaming_duvida", "pred": "roaming_cobranca", "confidence": 0.9406, "class": "linguagem", "profile": "regionalismo"}
{"id": "g0259-portabilidade-curto_neutro-00-D1", "gold": "sem_correspondencia", "pred": "troca_numero", "confidence": 0.9406, "class": "intencao_fora_das_opcoes", "profile": "curto_neutro"}
{"id": "g0265-portabilidade-indireto_multiplo-00-D1", "gold": "portabilidade", "pred": "cancelamento_linha", "confidence": 0.9406, "class": "taxonomia_par_dificil", "profile": "indireto_multiplo"}
{"id": "g0296-oos_fora_do_dominio-erros_digitacao-2-10-D1", "gold": "sem_correspondencia", "pred": "vas_contratacao", "confidence": 0.9406, "class": "fora_de_escopo_aceito", "profile": "erros_digitacao"}
{"id": "g0013-conta_contestacao-indireto_multiplo-03-D1", "gold": "conta_contestacao", "pred": "vas_cancelamento", "confidence": 0.8813, "class": "taxonomia_par_dificil", "profile": "indireto_multiplo"}
{"id": "g0008-conta_contestacao-informal_abreviado-01-D1", "gold": "conta_contestacao", "pred": "roaming_cobranca", "confidence": 0.8715, "class": "taxonomia_par_dificil", "profile": "informal_abreviado"}
{"id": "g0010-conta_contestacao-regionalismo-03-D1", "gold": "conta_contestacao", "pred": "conta_debito_automatico_digital", "confidence": 0.8715, "class": "linguagem", "profile": "regionalismo"}
{"id": "g0010-conta_contestacao-regionalismo-09-D1", "gold": "conta_contestacao", "pred": "roaming_cobranca", "confidence": 0.8715, "class": "taxonomia_par_dificil", "profile": "regionalismo"}
{"id": "g0079-plano_consulta-erros_digitacao-09-D1", "gold": "sem_correspondencia", "pred": "beneficios_consulta", "confidence": 0.8715, "class": "intencao_fora_das_opcoes", "profile": "erros_digitacao"}
{"id": "g0117-internet_problema_conexao-longo_contexto-09-D1", "gold": "sem_correspondencia", "pred": "internet_consumo", "confidence": 0.8715, "class": "intencao_fora_das_opcoes", "profile": "longo_contexto"}
{"id": "g0132-vas_contratacao-indireto_multiplo-09-D1", "gold": "sem_correspondencia", "pred": "recarga_realizar", "confidence": 0.8715, "class": "intencao_fora_das_opcoes", "profile": "indireto_multiplo"}
{"id": "g0194-parceiros_ofertas-longo_contexto-00-D1", "gold": "parceiros_ofertas", "pred": "beneficios_consulta", "confidence": 0.8715, "class": "taxonomia_par_dificil", "profile": "longo_contexto"}
{"id": "g0194-parceiros_ofertas-longo_contexto-10-D1", "gold": "parceiros_ofertas", "pred": "beneficios_consulta", "confidence": 0.8715, "class": "taxonomia_par_dificil", "profile": "longo_contexto"}
{"id": "g0216-suporte_chip_esim-indireto_multiplo-03-D1", "gold": "suporte_chip_esim", "pred": "parceiros_ofertas", "confidence": 0.8715, "class": "ambiguidade", "profile": "indireto_multiplo"}
{"id": "g0245-roaming_cobranca-curto_neutro-03-D1", "gold": "roaming_cobranca", "pred": "roaming_duvida", "confidence": 0.8715, "class": "desempenho_do_modelo", "profile": "curto_neutro"}
{"id": "g0254-cadastro_atualizacao-erros_digitacao-10-D1", "gold": "cadastro_atualizacao", "pred": "troca_numero", "confidence": 0.8715, "class": "linguagem", "profile": "erros_digitacao"}
{"id": "g0265-portabilidade-indireto_multiplo-08-D1", "gold": "sem_correspondencia", "pred": "troca_numero", "confidence": 0.8715, "class": "intencao_fora_das_opcoes", "profile": "indireto_multiplo"}
{"id": "g0265-portabilidade-indireto_multiplo-11-D1", "gold": "portabilidade", "pred": "troca_numero", "confidence": 0.8715, "class": "desempenho_do_modelo", "profile": "indireto_multiplo"}
{"id": "g0271-cancelamento_linha-longo_contexto-08-D1", "gold": "cancelamento_linha", "pred": "vas_cancelamento", "confidence": 0.8715, "class": "taxonomia_par_dificil", "profile": "longo_contexto"}
{"id": "g0285-reclamacao_atendimento-longo_contexto-06-D1", "gold": "reclamacao_atendimento", "pred": "cancelamento_linha", "confidence": 0.8715, "class": "ambiguidade", "profile": "longo_contexto"}
{"id": "g0285-reclamacao_atendimento-longo_contexto-11-D1", "gold": "reclamacao_atendimento", "pred": "plano_consulta", "confidence": 0.8715, "class": "ambiguidade", "profile": "longo_contexto"}
{"id": "g0289-atendimento_humano-erros_digitacao-11-D1", "gold": "sem_correspondencia", "pred": "reclamacao_atendimento", "confidence": 0.8715, "class": "intencao_fora_das_opcoes", "profile": "erros_digitacao"}