Os clientes da New Relic agora poderão monitor seus aplicativos ChatGPT personalizados para garantir que eles forneçam o desempenho, a confiabilidade e a experiência do usuário pretendidos.
“Trazer os serviços empresariais para o fluxo pure de uma conversa ChatGPT é uma estratégia poderosa, intuitiva e geradora de receita”, disse Brian Emerson, diretor de produtos da New Relic. “Mas uma vez que seu aplicativo cuidadosamente elaborado é instanciado no ChatGPT, ele tradicionalmente entra em uma caixa preta onde as ferramentas padrão de monitoramento do navegador podem falhar.”
A empresa explicou que quando um aplicativo é renderizado em uma conversa, os desenvolvedores não conseguem ver coisas como mudanças de format ou botões quebrados. Além disso, cabeçalhos de segurança, políticas de segurança de conteúdo, regras de sandbox de i-frame e limitações no armazenamento do lado do cliente podem ocultar dados importantes de desempenho e experiência do usuário.
A resposta da New Relic para esse problema é enviar um agente que possa coletar e analisar dados. Ele pode rastrear PageViews, PageViewtimings e AjaxRequests, fornecendo insights sobre latência e conectividade dentro do i-frame GPT. Ele alertará os desenvolvedores se uma resposta de IA acionar falhas de script ou sintaxe e também registrará esses eventos no console.
Além disso, ele rastreia como os usuários interagem com o conteúdo, como não interagir ou clicar no botão “comprar agora”. Os desenvolvedores poderão criar painéis que rastreiam benchmarks específicos de IA, como “Taxa de sucesso de renderização de IA”, que rastreia a frequência com que o LLM preenche um gráfico com sucesso de acordo com a especificação, e “Conversão de immediate para ação”, que rastreia se um tipo específico de sugestão leva a mais envolvimento do usuário.
“Com o New Relic, os desenvolvedores podem parar de adivinhar o desempenho de seu aplicativo quando hospedado por outra pessoa, ao mesmo tempo que mantêm os mais altos padrões de segurança e privacidade”, escreveu a empresa em um comunicado. anúncio.