Como testar SAP Joule na operação fiscal brasileira antes de ir para produção?

Na nossa rotina de farma, o caso concreto que pesou foi uma validação em etapas, com a equipe fiscal conferindo o que o Joule disse e a TI conferindo o acesso. Na prática, veja, o cerne está em separar quem testa a resposta de quem libera o acesso. Isso serve quando há equipes diferentes para fiscal e tecnologia. Se a mesma pessoa faz tudo, o teste vira formalidade. Para equipes pequenas, a saída é um revisor externo olhando uma amostra.

Uma pergunta, André Pereira, rápida. Sobre o caso de exceção, bem, meu adendo, ele exige dado de cadastro que a gente nem sempre tem. Você já montou esse caso com dado real ou só com dado de teste? Eu fico com medo de testar com dado fictício e aprovar algo que quebra na virada.

O resultado que importa é saber se o teste pegou o que realmente vai acontecer na virada. Carolina Nascimento, o dado fictício engana, sim, e concordo que ele não basta. Vamos lá, tá, a ideia é usar uma cópia do cadastro real, mascarando o que for pessoal, e rodar o gabarito sobre ela. Assim a gente vê a quebra antes de ir para produção, sem expor dado de ninguém. Eu não aprovaria nada que não tenha passado por essa cópia.

O risco que costumo ver é o teste parar no que deu certo e ninguém registrar a diferença de redação. Pelo que testei, ó, a mesma pergunta com palavras diferentes muda a leitura, e isso precisa entrar no gabarito. João Lima, a sua variação de tom é a parte que quase ninguém cobre. Mônica Moreira, o paralelo também ajuda, mas só se o gabarito tiver a mesma redação de quem pergunta de verdade.

Fábio Ribeiro, eu discordo de montar o gabarito só com perguntas que a equipe já resolveu. A lição é, ó, que o teste perde força quando repete o mesmo caminho. Na nossa operação de energia, o erro grave veio de um cenário que ninguém tinha pensado, como troca de regime no meio do período. Eu incluiria casos de exceção e de mudança de regra, mesmo sem histórico, para forçar o Joule a mostrar onde ele hesita.

Na minha rotina de indústria química, o teste começa com um caso concreto por tipo de operação, e não com uma lista genérica de perguntas. Segundo o que li, tá, o Joule precisa ser testado com o mesmo documento e com perguntas de pessoas diferentes, para medir se a resposta é estável. Eu montaria um lote de casos já resolvidos pela equipe fiscal, rodaria antes da virada e compararia cada resposta com o gabarito. Só libera para produção o que bater nos casos mais caros. Com equipe pequena, esse gabarito é o que mais protege.

Você já pensou em testar só o caminho feliz? Eu comecei assim, e aí, como vimos, o erro apareceu no cancelamento e na devolução. Outra forma que a minha equipe adotou foi o teste em paralelo: a apuração roda no jeito antigo e o Joule responde em cima do mesmo fechamento, e a gente só compara. Vale quando há um ciclo de fechamento estável para medir. Quando o volume é baixo, o paralelo fica caro e prefiro o gabarito.