Per deriva dei modelli si intende il modo in cui il comportamento di un'IA cambia nel tempo: aggiornamenti, riaddestramento e cambi di versione ne modificano le risposte. Di conseguenza, un brand può vedere la propria visibilità variare senza aver apportato alcuna modifica dalla propria parte.
Cos'è la deriva dei modelli?
I modelli linguistici non sono fissi: i provider li aggiornano, li riaddestrano e ne cambiano versione. Di conseguenza, la stessa domanda può ricevere risposte diverse da un mese all'altro. Questa è la deriva dei modelli.
Perché è importante per la misurazione?
Senza precauzioni, questa deriva verrebbe scambiata per una variazione autentica della visibilità di un brand. Un punteggio in salita o in discesa potrebbe semplicemente riflettere un aggiornamento di ChatGPT o Gemini, anziché un'azione del brand.
Come la teniamo sotto controllo
L'AGS isola questa deriva tramite un anchor set di brand di controllo. Una singola misurazione è fuorviante: ecco perché privilegiamo il monitoraggio del trend nel tempo. Vedi i nostri limiti riconosciuti.
Ogni domanda posta a ChatGPT senza il brand nella risposta è un concorrente raccomandato al suo posto: misurato su 6.820 risposte reali di IA.