A Paulmann Licht fez parceria com o Mastercard Dynamic Yield para realizar uma prova de conceito estruturada entre a sua experiência de pesquisa existente e o Experience Search. Após um workshop conjunto para alinhar objetivos de negócio, métricas de sucesso e metodologia de teste, as equipas lançaram um teste A/B 50/50 com o Experience Search em execução na sua configuração predefinida.
Os principais recursos avaliados incluíram Pesquisa Semântica, Sugestão Automática e Compreensão de Consulta, Tolerância a Erros de Digitação, Reconhecimento de SKU e de Produto e Merchandising Inteligente. Em vez de depender exclusivamente da correspondência de palavras-chave, o Dynamic Yield da Mastercard analisa a intenção por trás de uma consulta e conecta os compradores a produtos relevantes, mesmo quando os termos de pesquisa não correspondem exatamente à terminologia do catálogo.
A fase inicial de testes concentrou-se exclusivamente na medição do desempenho imediato. Assim que essa linha de base foi estabelecida, as equipes trabalharam juntas para refinar a relevância para consultas selecionadas de alto volume. Ao separar as fases de validação e otimização, a Paulmann Licht pôde entender claramente o valor entregue pela tecnologia de pesquisa subjacente.